异构环境下云计算数据副本动态管理研究

被引:17
作者
陶永才 [1 ]
张宁宁 [1 ]
石磊 [1 ]
卫琳 [2 ]
机构
[1] 郑州大学信息工程学院
[2] 郑州大学软件技术学院
关键词
云计算; 分布式文件系统; 灰色预测; 副本管理; 负载均衡;
D O I
暂无
中图分类号
TP311.5 [软件工程];
学科分类号
081202 ; 0835 ;
摘要
针对现有HDFS(Hadoop Distributed File System)数据副本数目固定,副本放置时未考虑节点异构性问题,本文提出一种异构环境下云计算数据副本动态管理模型DMDR.在副本创建时,DMDR根据节点性能选择最优副本放置节点;在系统运行过程中,基于灰色预测技术,DMDR根据数据的最近访问特征预测数据访问热度,并动态调整副本数目.实验表明,在异构环境下,较之现有HDFS副本管理机制,DMDR可有效减少节点之间数据传输,提高负载均衡,降低作业执行时间.
引用
收藏
页码:1487 / 1492
页数:6
相关论文
共 6 条
[1]   异构资源环境下的MapReduce性能优化 [J].
陶永才 ;
石磊 .
小型微型计算机系统, 2013, 34 (02) :287-292
[2]   CDRS:云存储中一种代价驱动的自适应副本策略 [J].
徐婧 ;
杨寿保 ;
王淑玲 ;
刘晓茜 .
中国科学院研究生院学报, 2011, 28 (06) :759-767
[3]  
云计算:系统实例与研究现状[J]. 陈康,郑纬民.软件学报. 2009(05)
[4]   针对负载均衡的P2P动态副本策略 [J].
左翠华 ;
卢正鼎 ;
李瑞轩 .
小型微型计算机系统, 2007, (11) :2020-2023
[5]  
MapReduce: simplified data processing on large clusters. Dean J,Ghemawat S. proceedings of the 6th Symposium on Operating System Design and Implementation . 2004
[6]  
A novel adaptive failure detector fordistributed systems. Tian D,Wu K,Li X. Networking,Architecture,and StorageInternational Conference . 2006