基于云计算的海量数据处理平台设计与实现

被引:15
作者
宋均 [1 ]
祝林 [2 ]
机构
[1] 中国西南电子技术研究所
[2] 四川职业技术学院
关键词
云计算; 海量数据; Hadoop分布式计算; 并行处理技术;
D O I
暂无
中图分类号
TP311.52 [];
学科分类号
081202 ; 0835 ;
摘要
针对传统并行处理技术在海量数据处理中存在的实际应用问题,利用云计算技术强大的计算能力、高效的海量数据处理方式,结合关系数据库实时访问的优点,在Hadoop分布式计算框架基础上,采用Map Reduce架构,设计并实现了基于云计算的海量数据处理平台。实践证明,该系统在计算能力、稳定性、可扩展性等方面都优于传统并行处理的技术,能有效解决海量数据大并发访问。
引用
收藏
页码:566 / 570
页数:5
相关论文
共 5 条
[1]  
Decoupling storage and computation in Hadoop with SuperDataNodes.[J].George Porter.ACM SIGOPS Operating Systems Review.2010, 2
[2]   云计算:系统实例与研究现状 [J].
陈康 ;
郑纬民 .
软件学报, 2009, 20 (05) :1337-1348
[3]  
云计算.[M].王鹏; 黄华峰; 曹珂; 主编.人民邮电出版社.2010,
[4]  
云计算.[M].刘鹏; 主编.电子工业出版社.2010,
[5]  
云计算.[M].(美) 芬加 (Fingar;P.) ; 著.电子工业出版社.2009,