首页 | 本学科首页   官方微博 | 高级检索  
     

Hadoop平台下计算模型中调度策略的研究
引用本文:曹旭,张云华.Hadoop平台下计算模型中调度策略的研究[J].计算机应用与软件,2013(9).
作者姓名:曹旭  张云华
作者单位:浙江理工大学信息学院 浙江 杭州310018
摘    要:针对Hadoop平台下默认调度算法FIFO、计算能力调度算法以及公平调度算法在调度过程中遵守严格的队列顺序,导致一些任务被调度到不满足数据本地性节点上的问题,提出一个基于本地性的调度算法——延时调度。该算法在维护公平性原则的同时,当一个被调度的作业无法启动一个本地的任务时,让这个任务等待一小段时间,调度其他作业先执行。实验结果表明,此调度算法缩短了作业平均响应时间,有效增加了集群系统的吞吐量,提高了集群资源利用率。

关 键 词:Hadoop  作业调度  延时调度  本地性

RESEARCH ON SCHEDULING STRATEGY OF COMPUTING MODEL BASED ON HADOOP PLATFORM
Cao Xu , Zhang Yunhua.RESEARCH ON SCHEDULING STRATEGY OF COMPUTING MODEL BASED ON HADOOP PLATFORM[J].Computer Applications and Software,2013(9).
Authors:Cao Xu  Zhang Yunhua
Abstract:
Keywords:Hadoop  Job scheduling  Delay scheduling  Local property
本文献已被 万方数据 等数据库收录!
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号