Hadoop性能优化研究

被引：16

作者：

柳香

李瑞台

李俊红

段胜业

机构：

[1] 河北师范大学数学与信息科学学院

来源：

河北师范大学学报(自然科学版) | 2011年 / 35卷 / 06期

关键词：

Hadoop; 遗传算法; 性能优化; 配置方案;

D O I：

10.13763/j.cnki.jhebnu.nse.2011.06.001

中图分类号：

TP338.8 [分布式计算机];

学科分类号：

140102 [集成电路设计与设计自动化];

摘要：

优化Hadoop的性能可大大提高Map Reduce的工作效率,缩短任务执行时间,增加分布式计算的吞吐量.Hadoop的执行性能受到多种配置属性的影响,不同配置属性间也存在相互制约关系.基于遗传算法,对配置方案不断选择、交叉、变异,多次迭代后产生近似最优配置方案.实验结果表明该配置方案能够有效提高系统性能,并且具有稳定性和适用性.

引用

页码：567 / 570

页数：4