基于Hadoop平台的电信大数据入库及查询性能优化研究

被引:9
作者
陈娜
张金娟
刘智琼
徐歆壹
机构
[1] 中国电信股份有限公司广州研究院
关键词
大数据; Hadoop; HBase; 性能优化;
D O I
暂无
中图分类号
TP311.13 [];
学科分类号
1201 ;
摘要
随着移动互联网的快速发展,电信运营商内部各种IT系统中的数据出现了"大数据"的特征,既有的技术架构和路线已无法高效处理如此海量的数据。针对流量经营大数据管理和大数据服务中海量DPI数据的数据入库和数据查询场景,提出了一种基于Hadoop的分布式数据服务架构,并设计出在该架构下的数据入库和查询性能的优化算法,通过模拟数据的实验对性能优化算法进行了验证。
引用
收藏
页码:58 / 63
页数:6
相关论文
共 5 条
[1]   一种基于HBase的高效空间关键字查询策略 [J].
张榆 ;
马友忠 ;
孟小峰 .
小型微型计算机系统, 2012, 33 (10) :2141-2146
[2]   一种改进的Hadoop数据放置策略 [J].
林伟伟 .
华南理工大学学报(自然科学版), 2012, 40 (01) :152-158
[3]  
Hadoop技术内幕[M]. 机械工业出版社 , 蔡斌, 2013
[4]  
Hadoop技术内幕[M]. 机械工业出版社 , 董西成, 2013
[5]  
性能测试诊断分析与优化[M]. 电子工业出版社 , 陈能技, 2012