分布式网络环境中基于MapReduce的WordCount实现

被引:16
作者
张文光 [1 ]
陈俊 [2 ]
姚钰辉 [1 ]
申田静 [3 ]
机构
[1] 贵州师范大学经济与管理学院
[2] 贵州师范大学图书馆
[3] 贵州师范大学教育科学学院
关键词
云计算; 分布式网络; Hadoop; MapReduce;
D O I
10.16614/j.cnki.issn1004-5570.2015.01.023
中图分类号
TP311.1 [程序设计];
学科分类号
081205 [计算机软件];
摘要
基于Hadoop的MapReduce分布计算模型,在伪分布模式下以Word Count实现为例,研究了MapReduce系统架构及运行机制、编程模型以及它作业的生命周期,实现了基于MapReduce的文本文字计数功能。
引用
收藏
页码:93 / 97
页数:5
相关论文
共 5 条
[1]
MapReduce并行编程模型研究综述 [J].
李建江 ;
崔健 ;
王聃 ;
严林 ;
黄义双 .
电子学报, 2011, 39 (11) :2635-2642
[2]
云计算:体系架构与关键技术 [J].
罗军舟 ;
金嘉晖 ;
宋爱波 ;
东方 .
通信学报 , 2011, (07) :3-21
[3]
基于Hadoop建立云计算系统 [J].
陈俊 ;
陈孝威 .
贵州大学学报(自然科学版), 2011, 28 (03) :91-93
[4]
MapReduce:新型的分布式并行计算编程模型 [J].
李成华 ;
张新访 ;
金海 ;
向文 .
计算机工程与科学, 2011, 33 (03) :129-135
[5]
Hadoop技术内幕.[M].董西成; 著.机械工业出版社.2013,