| 
  中国学术期刊网络出版总库
  关闭
Hadoop云平台下基于资源预估的作业调度算法  
   推荐 CAJ下载 PDF下载
【英文篇名】 Job scheduling algorithm based on data-aware in Hadoop
【下载频次】 ★★★★★
【作者】 卢慧; 高弘博; 张丰满; 王梅; 肖震;
【英文作者】 Lu Hui; Gao Hongbo; Zhang Fengman; Wang Mei; Xiao Zhen; Software Testing Center; Chengdu Textile College; Wuhan Data Center; China Construction Bank;
【作者单位】 成都纺织高等专科学校软件测试中心; 中国建设银行武汉数据中心;
【文献出处】 计算机应用研究 , Application Research of Computers, 编辑部邮箱 2016年 08期  
期刊荣誉:中文核心期刊要目总览  ASPT来源刊  中国期刊方阵  CJFD收录刊
【中文关键词】 Hadoop; 云平台; 时间约束; 资源预估; 作业调度;
【英文关键词】 Hadoop; cloud computing; deadline constraints; data-aware; job scheduling;
【摘要】 为解决Hadoop云平台下作业无法满足时间约束的问题,提出一种基于资源预估的作业调度算法。通过建立资源预估模型计算作业所需资源,结合作业间的资源竞争关系对完成时间进行判定,最后根据作业的数据本地性改进延迟调度策略。实验结果表明,该算法能够满足作业对时间约束的需求,提升系统的资源利用率。
【英文摘要】 In order to satisfy the deadline constraints in Hadoop,this paper proposed a job scheduling algorithm based on dataaware. This algorithm proposed a resource estimation model and computed job's deadline,then optimized the delay strategy according to resource locality. Through analyzing the result of experiments,this algorithm can satisfy the deadline constraints and improve the efficient in Hadoop.
【基金】 四川省科技厅基金资助项目(2012FZ0081)
【更新日期】 2016-09-19
【分类号】 TP301.6
【正文快照】 随着Internet和Web技术的高速发展,大数据时代已经来临,如何从大数据中获取有价值的信息,成为科研机构和业界的研究热点[1~3]。Hadoop是一个分布式云计算平台,其核心思想源自于Google公司的MapReduce编程模型和GFS文件系统模型。由于Hadoop的代码开源,目前各大IT公司均采用其作

xxx
【读者推荐文章】中国期刊全文数据库
【相似文献】
中国期刊全文数据库
中国优秀硕士学位论文全文数据库
中国博士学位论文全文数据库
中国重要会议论文全文数据库
中国重要报纸全文数据库
中国学术期刊网络出版总库
点击下列相关研究机构和相关文献作者,可以直接查到这些机构和作者被《中国知识资源总库》收录的其它文献,使您全面了解该机构和该作者的研究动态和历史。
【文献分类导航】从导航的最底层可以看到与本文研究领域相同的文献,从上层导航可以浏览更多相关领域的文献。

工业技术
  自动化技术、计算机技术
   计算技术、计算机技术
    一般性问题
     理论、方法
      算法理论
  
 
  CNKI系列数据库编辑出版及版权所有:中国学术期刊(光盘版)电子杂志社
中国知网技术服务及网站系统软件版权所有:清华同方知网(北京)技术有限公司
其它数据库版权所有:各数据库编辑出版单位(见各库版权信息)
京ICP证040431号    互联网出版许可证 新出网证(京)字008号