10.3969/j.issn.1000-7024.2013.01.036
基于调度器的Hadoop性能优化方法研究
为了提高Hadoop调度器的调度性能,缩短Hadoop集群的任务整体响应时间,提出了一种基于CPU占用率的动态调度改进算法.首先对Hadoop传统的性能优化方法进行了对比,指出其存在问题的关键是缺乏动态性和灵活性.在此基础上,深入分析Hadoop默认任务调度模型,提出了一种以CPU占用率作为负载指标,在循环分配任务时根据反馈的负载指标判断节点负载情况的算法,动态适应负载变化.实验结果表明,该算法在Hadoop集群中,能有效提高集群性能.
Hadoop、负载、CPU占用率、云计算、动态调度
34
TP301(计算技术、计算机技术)
国家自然科学基金项目21073242
2013-04-03(万方平台首次上网日期,不代表论文的发表时间)
共5页
190-194