云计算环境下基于数据关联度的海洋监测大数据布局策略

被引:9
作者
黄冬梅 [1 ]
随宏运 [1 ]
贺琪 [1 ]
赵丹枫 [1 ]
杜艳玲 [1 ]
苏诚 [2 ]
机构
[1] 上海海洋大学信息学院
[2] 国家海洋局东海信息中心
基金
上海市自然科学基金;
关键词
海洋监测大数据; 云计算环境; 数据布局; 关联度;
D O I
暂无
中图分类号
TP311.13 [];
学科分类号
1201 ;
摘要
海洋监测数据是具有强数据关联的大数据,如何高效地进行数据布局,是制约其有效管理和应用的关键问题之一。在云计算环境下,针对海洋监测大数据的特点,提出了一种基于数据关联度的海洋监测大数据布局策略。在保证数据中心存储均衡的情况下,综合考虑了监测任务、监测点和监测数据之间的关联,建立了海洋监测点间的关联度、监测数据间的关联度和监测数据全局关联度,从三个角度对海洋监测大数据进行布局,使得同一数据中心内的数据具有较高的关联度。通过实验分析,该方法降低了用户访问海洋监测大数据的响应时间,为海洋监测大数据提供了一种有效的布局策略。
引用
收藏
页码:1989 / 1996
页数:8
相关论文
共 16 条
[1]  
MRA++: Scheduling and data placement on MapReduce for heterogeneous environments.[J].Julio C.S. Anjos;Iván Carrera;Wagner Kolberg;Andre Luis Tibola;Luciana B. Arantes;Claudio R. Geyer.Future Generation Computer Systems.2015,
[2]   P2P storage systems: Study of different placement policies [J].
Caron, Stephane ;
Giroire, Frederic ;
Mazauric, Dorian ;
Monteiro, Julian ;
Perennes, Stephane .
PEER-TO-PEER NETWORKING AND APPLICATIONS, 2014, 7 (04) :427-443
[3]   A distributed data storage protocol for heterogeneous wireless sensor networks with mobile sinks [J].
Maia, Guilherme ;
Guidoni, Daniel L. ;
Viana, Aline C. ;
Aquino, Andre L. L. ;
Mini, Raquel A. F. ;
Loureiro, Antonio A. F. .
AD HOC NETWORKS, 2013, 11 (05) :1588-1602
[4]  
Security and privacy for storage and computation in cloud computing.[J].Lifei Wei;Haojin Zhu;Zhenfu Cao;Xiaolei Dong;Weiwei Jia;Yunlu Chen;Athanasios V. Vasilakos.Information Sciences.2013,
[5]   基于释放和重构的科学工作流数据布局策略 [J].
张甜甜 ;
崔立真 .
计算机研究与发展 , 2013, (S2) :71-76
[6]   面向新型存储的大数据存储架构与核心算法综述 [J].
金培权 ;
郝行军 ;
岳丽华 .
计算机工程与科学, 2013, 35 (10) :12-24
[7]   云计算与海洋环境监测 [J].
解鹏飞 ;
隋伟娜 ;
陶冠峰 ;
梁斌 .
海洋环境科学, 2013, 32 (04) :576-580
[8]   基于云计算的一种新的数据交换架构 [J].
赵伟 ;
卓伟 ;
李占波 ;
王志华 .
计算机工程与科学, 2013, 35 (08) :15-19
[9]   数据密集型计算中负载均衡的数据布局方法 [J].
宋杰 ;
李甜甜 ;
闫振兴 ;
朱志良 .
北京邮电大学学报, 2013, (04) :76-80
[10]   面向海量数据存储的Erasure-Code分布式文件系统I/O优化方法 [J].
严林 ;
邢晶 ;
霍志刚 ;
马捷 .
计算机工程与科学, 2013, 35 (05) :20-27