您的位置: 专家智库 > >

赵保学

作品数:6 被引量:8H指数:1
供职机构:西北工业大学计算机学院更多>>
发文基金:国家自然科学基金国家重点基础研究发展计划西北工业大学研究生创业种子基金更多>>
相关领域:自动化与计算机技术更多>>

文献类型

  • 3篇期刊文章
  • 2篇会议论文

领域

  • 5篇自动化与计算...

主题

  • 2篇可扩展
  • 2篇HADOOP
  • 2篇MAPRED...
  • 1篇优化技术
  • 1篇优化设计
  • 1篇数据管理
  • 1篇图像
  • 1篇图像过滤
  • 1篇可扩展性
  • 1篇扩展性
  • 1篇基于JAVA
  • 1篇计算机
  • 1篇计算机系
  • 1篇计算机系统
  • 1篇共享
  • 1篇MAPRED...
  • 1篇采样
  • 1篇查询
  • 1篇查询优化
  • 1篇查询优化技术

机构

  • 5篇西北工业大学

作者

  • 5篇赵保学
  • 3篇陈群
  • 3篇金健
  • 2篇李战怀
  • 2篇潘巍
  • 2篇姜涛

传媒

  • 1篇计算机应用研...
  • 1篇计算机与现代...
  • 1篇科技创新导报

年份

  • 2篇2013
  • 2篇2012
  • 1篇2008
6 条 记 录,以下是 1-5
排序方式:
可扩展Hadoop任务分配模块的研究与实现
MapReduce是一种应用广泛的并行编程模型,Hadoop是MapReduce的开源实现.为了满足不同类型的MapReduce作业对任务分配策略的特殊需求,在深入分析Hadoop固有任务分配机制的基础上,设计并实现了一...
赵保学李战怀陈群姜涛潘巍金健
关键词:MAPREDUCEHADOOP可扩展性
文献传递
基于Java的图像过滤技术
2008年
Java语言拥有不断完善的类库以及强大的扩展性、可移植性等诸多特性,为设计人员提供了极大的方便。图像过滤技术是计算机图像处理中的一个重要方面,在很多领域有着广泛的应用。本文对Java 2D API中的一些图像处理工具进行了介绍,并以光照过滤器LightFilter为例,介绍了用Java实现图像过滤技术的一般流程。
赵保学
关键词:JAVA
可扩展Hadoop任务分配模块的研究与实现
MapReduce是一种应用广泛的并行编程模型,Hadoop是MapReduce的开源实现。为了满足不同类型的MapReduce作业对任务分配策略的特殊需求,在深入分析Hadoop固有任务分配机制的基础上,设计并实现了一...
Zhao Baoxue赵保学Li Zhanhuai李战怀Chen Qun陈群Jiang Tao姜涛Pan Wei潘巍Jin Jian金健
关键词:计算机系统优化设计数据管理
基于共享的MapReduce多查询优化技术被引量:7
2013年
为解决MapReduce处理多个查询时效率低下的问题,提出了一种基于查询共享的MapReduce查询优化方法——ShareOpt优化。通过分析所有查询的操作模式,找出其中共享的子查询部分,并根据子查询的执行顺序构造执行计划有向图(DAG),最终确定一组查询的整体执行计划。通过与Hive和Pig的对比,验证了该方法能够在保证准确性的情况下有效地减少执行步数,提高查询执行的效率。
赵保学李战怀陈群潘巍姜涛金健
关键词:查询优化MAPREDUCE
数据倾斜情况下基于MapReduce模型的连接算法研究被引量:1
2013年
基于MapReduce的连接算法的研究是海量数据研究领域的一个重要内容,但都集中在数据分布均匀的情况下进行算法优化,而在实际应用中数据分布往往是不均匀的。本文基于此背景,提出一种适合在数据严重倾斜时使用基于MapReduce编程模型的连接算法Skew Control Join,算法通过采样获取数据集的整体分布,通过全局分区将数据集进行分割,使倾斜数据的处理平均分配到所有的Reduce任务上。实验表明在数据倾斜时,本文提出的算法具有良好的性能,达到研究目标。
金健陈群赵保学
关键词:采样
共1页<1>
聚类工具0