MapReduce模型的调度及容错机制研究

被引:28
作者
孙广中
肖锋
熊曦
机构
[1] 中国科学技术大学计算机科学与技术系
关键词
MapReduce; 调度; 容错;
D O I
10.19304/j.cnki.issn1000-7180.2007.09.052
中图分类号
TP311.11 [];
学科分类号
081202 ; 0835 ;
摘要
MapReduce是一种并行编程模型,可以用来处理和生成大量数据集。它的调度以及容错机制是模型的重要一部分。通过对MapReduce模型的执行过程进行分析,提取得到其上面的调度以及容错模型。并将P2P模型中常用的调度思想使用于MapReduce调度模型上,对原来的调度机制和容错机制做一定的修改。
引用
收藏
页码:178 / 180
页数:3
相关论文
共 2 条
[1]  
Map Reduce:simplified data processing on large cluster. Jeffrey Dean,Sanjay Ghemawat. OSDI . 2004
[2]  
Study on scheduling strategy for global computing application. Sun Guangzhong,Fan Bin,Chen Guoliang,et al. PDCAT . 2006