学术探索
学术期刊
学术作者
新闻热点
数据分析
智能评审
基于Hive的海量web日志分析系统设计研究
被引:24
作者
:
论文数:
引用数:
h-index:
机构:
江三锋
[
1
]
论文数:
引用数:
h-index:
机构:
王元亮
[
2
]
机构
:
[1]
云南财经大学信息学院
[2]
云南财经大学中华职业学院
来源
:
软件
|
2015年
/ 36卷
/ 04期
关键词
:
Hive;
Web日志;
Hadoop;
网站建设;
D O I
:
暂无
中图分类号
:
TP393.092 [];
学科分类号
:
摘要
:
针对于传统对海量数据处理和计算的瓶颈,提出了一种基于Hive的海量web日志分析机制。通过Hadoop分布式系统架构以及Hive数据仓库对海量web日志做了分析处理,并对用户的浏览行为进行了分析研究。对用户浏览行为中的浏览量和跳出率、IP数、版块热度排行的分析结果对于网站建设和大数据分析系统优化都具有一定的指导意义。
引用
收藏
页码:93 / 96
页数:4
相关论文
共 16 条
[1]
Hadoop作业调度本地性的研究与优化
[J].
陈若飞
论文数:
0
引用数:
0
h-index:
0
机构:
北京交通大学计算机信息与技术学院工程系
陈若飞
;
论文数:
引用数:
h-index:
机构:
姜文红
.
软件,
2015,
36
(02)
:64
-68
[2]
一种基于Hive日志分析的大数据存储优化方法
[J].
王正也
论文数:
0
引用数:
0
h-index:
0
机构:
北京邮电大学通信与信息工程学院
王正也
;
论文数:
引用数:
h-index:
机构:
李书芳
.
软件,
2014,
35
(11)
:94
-100
[3]
Hadoop下海量遥感数据的处理
[J].
论文数:
引用数:
h-index:
机构:
田野
;
论文数:
引用数:
h-index:
机构:
苏红旗
;
论文数:
引用数:
h-index:
机构:
田栋
.
软件,
2014,
35
(03)
:91
-93
[4]
基于Hadoop的离线视频处理技术研究与实现
[J].
论文数:
引用数:
h-index:
机构:
高东海
;
论文数:
引用数:
h-index:
机构:
李文生
;
论文数:
引用数:
h-index:
机构:
张海涛
.
软件,
2013,
34
(11)
:5
-9
[5]
无线传感器网络Agent数据分流策略
[J].
胡晓敏
论文数:
0
引用数:
0
h-index:
0
机构:
中山大学信息科学与技术学院
胡晓敏
.
新型工业化,
2013,
3
(04)
:103
-112
[6]
对象存储研究综述
[J].
论文数:
引用数:
h-index:
机构:
罗莎
;
论文数:
引用数:
h-index:
机构:
鄂海红
;
论文数:
引用数:
h-index:
机构:
宋美娜
;
论文数:
引用数:
h-index:
机构:
黎燕
.
新型工业化,
2012,
2
(11)
:32
-41
[7]
一种基于HADOOP的办公文件存储方法
[J].
论文数:
引用数:
h-index:
机构:
杜继华
;
论文数:
引用数:
h-index:
机构:
吴伟明
;
论文数:
引用数:
h-index:
机构:
谷勇浩
.
软件,
2012,
33
(10)
:6
-8
[8]
一种基于Hadoop的个性化推荐系统架构
[J].
论文数:
引用数:
h-index:
机构:
张永霞
;
论文数:
引用数:
h-index:
机构:
王洪波
;
论文数:
引用数:
h-index:
机构:
程时端
.
新型工业化,
2012,
2
(08)
:7
-12
[9]
基于MapReduce的Web日志挖掘
[J].
论文数:
引用数:
h-index:
机构:
李彬
;
论文数:
引用数:
h-index:
机构:
刘莉莉
.
计算机工程与应用,
2012,
48
(22)
:95
-98
[10]
基于Oracle物化视图日志的数据同步技术研究
[J].
刘静涛
论文数:
0
引用数:
0
h-index:
0
机构:
部队
刘静涛
;
吴伊萌
论文数:
0
引用数:
0
h-index:
0
机构:
部队
吴伊萌
;
张明安
论文数:
0
引用数:
0
h-index:
0
机构:
部队
张明安
.
软件,
2012,
33
(01)
:89
-91
←
1
2
→
共 16 条
[1]
Hadoop作业调度本地性的研究与优化
[J].
陈若飞
论文数:
0
引用数:
0
h-index:
0
机构:
北京交通大学计算机信息与技术学院工程系
陈若飞
;
论文数:
引用数:
h-index:
机构:
姜文红
.
软件,
2015,
36
(02)
:64
-68
[2]
一种基于Hive日志分析的大数据存储优化方法
[J].
王正也
论文数:
0
引用数:
0
h-index:
0
机构:
北京邮电大学通信与信息工程学院
王正也
;
论文数:
引用数:
h-index:
机构:
李书芳
.
软件,
2014,
35
(11)
:94
-100
[3]
Hadoop下海量遥感数据的处理
[J].
论文数:
引用数:
h-index:
机构:
田野
;
论文数:
引用数:
h-index:
机构:
苏红旗
;
论文数:
引用数:
h-index:
机构:
田栋
.
软件,
2014,
35
(03)
:91
-93
[4]
基于Hadoop的离线视频处理技术研究与实现
[J].
论文数:
引用数:
h-index:
机构:
高东海
;
论文数:
引用数:
h-index:
机构:
李文生
;
论文数:
引用数:
h-index:
机构:
张海涛
.
软件,
2013,
34
(11)
:5
-9
[5]
无线传感器网络Agent数据分流策略
[J].
胡晓敏
论文数:
0
引用数:
0
h-index:
0
机构:
中山大学信息科学与技术学院
胡晓敏
.
新型工业化,
2013,
3
(04)
:103
-112
[6]
对象存储研究综述
[J].
论文数:
引用数:
h-index:
机构:
罗莎
;
论文数:
引用数:
h-index:
机构:
鄂海红
;
论文数:
引用数:
h-index:
机构:
宋美娜
;
论文数:
引用数:
h-index:
机构:
黎燕
.
新型工业化,
2012,
2
(11)
:32
-41
[7]
一种基于HADOOP的办公文件存储方法
[J].
论文数:
引用数:
h-index:
机构:
杜继华
;
论文数:
引用数:
h-index:
机构:
吴伟明
;
论文数:
引用数:
h-index:
机构:
谷勇浩
.
软件,
2012,
33
(10)
:6
-8
[8]
一种基于Hadoop的个性化推荐系统架构
[J].
论文数:
引用数:
h-index:
机构:
张永霞
;
论文数:
引用数:
h-index:
机构:
王洪波
;
论文数:
引用数:
h-index:
机构:
程时端
.
新型工业化,
2012,
2
(08)
:7
-12
[9]
基于MapReduce的Web日志挖掘
[J].
论文数:
引用数:
h-index:
机构:
李彬
;
论文数:
引用数:
h-index:
机构:
刘莉莉
.
计算机工程与应用,
2012,
48
(22)
:95
-98
[10]
基于Oracle物化视图日志的数据同步技术研究
[J].
刘静涛
论文数:
0
引用数:
0
h-index:
0
机构:
部队
刘静涛
;
吴伊萌
论文数:
0
引用数:
0
h-index:
0
机构:
部队
吴伊萌
;
张明安
论文数:
0
引用数:
0
h-index:
0
机构:
部队
张明安
.
软件,
2012,
33
(01)
:89
-91
←
1
2
→