基于hadoop云平台的智能电网HDFS资源存储技术研究

被引:10
作者
孟祥萍 [1 ]
周来 [2 ]
机构
[1] 长春工程学院电气与信息工程学院
[2] 东北电力大学信息工程学院
关键词
智能电网; 数据存储; hadoop; hdfs;
D O I
暂无
中图分类号
TM76 [电力系统的自动化];
学科分类号
080802 ;
摘要
面对未来智能电网海量存储资源的管理困难、可靠性低、维护分布式数据成本高等难题,文章首先在Hadoop云计算平台基础上搭建HDFS(Hadoop Distributed File System),论证了其强大的数据存储性能,并通过实验发现HDFS在进一步提高存储性能方面的诸多瓶颈——节点状态信息缺失、系统负载不均、存储效率下降等。随后考虑HDFS原始方案的弊端并给出完善数据节点状态信息、设定数据副本系数的HDFS架构改进方案,最后通过在仿真平台上的实验,有效地平衡了节点间的负载,显著提高了存储效率,同时增强了用户体验,证明了该策略提高HDFS系统存储性能的可行性。
引用
收藏
页码:24 / 30
页数:7
相关论文
共 17 条
[1]  
基于HDFS的云存储系统数据安全性研究.[D].石磊庆.北京邮电大学.2013, 11
[2]  
基于HDFS的分布式存储研究与应用.[D].童明.华中科技大学.2012, 07
[3]  
高可用性的HDFS.[M].文艾; 王磊; 编著.清华大学出版社.2012,
[4]  
云计算.[M].刘鹏; 主编.电子工业出版社.2011,
[5]  
Hadoop权威指南.[M].(美) 怀特 (White;T.) ; 著.清华大学出版社.2011,
[6]  
智能电网技术.[M].刘振亚; 主编.中国电力出版社.2010,
[7]   异构环境下云计算数据副本动态管理研究 [J].
陶永才 ;
张宁宁 ;
石磊 ;
卫琳 .
小型微型计算机系统, 2013, 34 (07) :1487-1492
[8]   数据拓扑及其在电网数据处理分析中的应用 [J].
胡牧 ;
李勇 ;
孔震 ;
刘士进 .
电力系统自动化, 2013, 37 (03) :83-86+115
[9]   基于可用性度量的分布式文件系统节点失效恢复算法 [J].
廖彬 ;
于炯 ;
钱育蓉 ;
杨兴耀 .
计算机科学, 2013, 40 (01) :144-149
[10]   基于云计算的电力数据中心基础架构及其关键技术 [J].
王德文 .
电力系统自动化, 2012, 36 (11) :67-71+107