基于Hive的海量web日志分析系统设计研究

被引:24
作者
江三锋 [1 ]
王元亮 [2 ]
机构
[1] 云南财经大学信息学院
[2] 云南财经大学中华职业学院
关键词
Hive; Web日志; Hadoop; 网站建设;
D O I
暂无
中图分类号
TP393.092 [];
学科分类号
摘要
针对于传统对海量数据处理和计算的瓶颈,提出了一种基于Hive的海量web日志分析机制。通过Hadoop分布式系统架构以及Hive数据仓库对海量web日志做了分析处理,并对用户的浏览行为进行了分析研究。对用户浏览行为中的浏览量和跳出率、IP数、版块热度排行的分析结果对于网站建设和大数据分析系统优化都具有一定的指导意义。
引用
收藏
页码:93 / 96
页数:4
相关论文
共 16 条
[1]
Hadoop作业调度本地性的研究与优化 [J].
陈若飞 ;
姜文红 .
软件, 2015, 36 (02) :64-68
[2]
一种基于Hive日志分析的大数据存储优化方法 [J].
王正也 ;
李书芳 .
软件, 2014, 35 (11) :94-100
[3]
Hadoop下海量遥感数据的处理 [J].
田野 ;
苏红旗 ;
田栋 .
软件, 2014, 35 (03) :91-93
[4]
基于Hadoop的离线视频处理技术研究与实现 [J].
高东海 ;
李文生 ;
张海涛 .
软件, 2013, 34 (11) :5-9
[5]
无线传感器网络Agent数据分流策略 [J].
胡晓敏 .
新型工业化, 2013, 3 (04) :103-112
[6]
对象存储研究综述 [J].
罗莎 ;
鄂海红 ;
宋美娜 ;
黎燕 .
新型工业化, 2012, 2 (11) :32-41
[7]
一种基于HADOOP的办公文件存储方法 [J].
杜继华 ;
吴伟明 ;
谷勇浩 .
软件, 2012, 33 (10) :6-8
[8]
一种基于Hadoop的个性化推荐系统架构 [J].
张永霞 ;
王洪波 ;
程时端 .
新型工业化, 2012, 2 (08) :7-12
[9]
基于MapReduce的Web日志挖掘 [J].
李彬 ;
刘莉莉 .
计算机工程与应用, 2012, 48 (22) :95-98
[10]
基于Oracle物化视图日志的数据同步技术研究 [J].
刘静涛 ;
吴伊萌 ;
张明安 .
软件, 2012, 33 (01) :89-91