共 12 条
基于大数据的井喷式状态监测数据实时处理研究
被引：13
作者：
吴秋莉
论文数: 0 引用数: 0
h-index: 0
机构: 广西电网有限责任公司电力科学研究院
郭丽娟
论文数: 0 引用数: 0
h-index: 0
机构: 广西电网有限责任公司电力科学研究院
吕泽承
论文数: 0 引用数: 0
h-index: 0
机构: 广西电网有限责任公司电力科学研究院
张炜
论文数: 0 引用数: 0
h-index: 0
机构: 广西电网有限责任公司电力科学研究院
机构：
[1] 广西电网有限责任公司电力科学研究院
来源：
关键词：
井喷式数据;
Hadoop框架;
大数据;
实时处理框架;
D O I：
10.16543/j.2095-641x.electric.power.ict.2017.03.009
中图分类号：
TP311.13 [];
学科分类号：
1201 ;
摘要：
针对快速增长的井喷式状态监测数据,文章提出一种大数据分析方法。介绍了目前大数据流式数据实时分析技术和实时批处理技术,在Hadoop框架下结合状态监测系统的数据特点建立基于Kafka+Storm+Spark+Hadoop的实时分析架构,该分析架构能保证所有的监测数据及流数据都能被及时有效处理,防止数据接入速率不匹配造成的数据丢失,将处理后的状态监测数据保存到分布式文件系统或实时数据库中并深度分析,实现了海量井喷状态监测数据快速、有效的分析处理。
引用
收藏
页码：49 / 54
页数：6
相关论文
共 12 条
- [1] 分布式云化智能电网状态监测体系研究[J]. 电力信息与通信技术, 2016, 14 (05) : 121 - 126戚伟强戚伟强论文数: 0 引用数: 0 h-index: 0机构: 国网浙江省电力公司信息通信分公司沈潇军沈潇军论文数: 0 引用数: 0 h-index: 0机构: 国网浙江省电力公司信息通信分公司倪阳旦倪阳旦论文数: 0 引用数: 0 h-index: 0机构: 国网浙江省电力公司信息通信分公司钟一俊钟一俊论文数: 0 引用数: 0 h-index: 0机构: 国网浙江省电力公司信息通信分公司
- [3] 分频段能量谱及马氏聚类算法在开关柜局部放电模式识别中的应用[J]. 高电压技术, 2015, 41 (10) : 3332 - 3341陈攀陈攀论文数: 0 引用数: 0 h-index: 0机构: 重庆大学输配电装备及系统安全与新技术国家重点实验室 国网重庆市电力公司江北供电分公司 重庆大学输配电装备及系统安全与新技术国家重点实验室姚陈果姚陈果论文数: 0 引用数: 0 h-index: 0机构: 重庆大学输配电装备及系统安全与新技术国家重点实验室 重庆大学输配电装备及系统安全与新技术国家重点实验室廖瑞金廖瑞金论文数: 0 引用数: 0 h-index: 0机构: 重庆大学输配电装备及系统安全与新技术国家重点实验室 重庆大学输配电装备及系统安全与新技术国家重点实验室陈昱陈昱论文数: 0 引用数: 0 h-index: 0机构: 不详 重庆大学输配电装备及系统安全与新技术国家重点实验室米彦米彦论文数: 0 引用数: 0 h-index: 0机构: 重庆大学输配电装备及系统安全与新技术国家重点实验室 重庆大学输配电装备及系统安全与新技术国家重点实验室
- [4] 输电线路状态监测系统规范化设计与应用[J]. 电网与清洁能源, 2014, 30 (10) : 13 - 19王乃永王乃永论文数: 0 引用数: 0 h-index: 0机构: 国网陕西省电力公司经济技术研究院 国网陕西省电力公司经济技术研究院邓育平邓育平论文数: 0 引用数: 0 h-index: 0机构: 国网陕西省电力公司 国网陕西省电力公司经济技术研究院谭蓉谭蓉论文数: 0 引用数: 0 h-index: 0机构: 陕西省电力设计院 国网陕西省电力公司经济技术研究院见伟见伟论文数: 0 引用数: 0 h-index: 0机构: 北京朗新科技有限公司 国网陕西省电力公司经济技术研究院卫鹏卫鹏论文数: 0 引用数: 0 h-index: 0机构: 北京朗新科技有限公司 国网陕西省电力公司经济技术研究院
- [5] 大数据流式计算:关键技术及系统实例[J]. 软件学报, 2014, 25 (04) : 839 - 862孙大为孙大为论文数: 0 引用数: 0 h-index: 0机构: 清华大学计算机科学与技术系 清华大学计算机科学与技术系张广艳张广艳论文数: 0 引用数: 0 h-index: 0机构: 清华大学计算机科学与技术系 不详 清华大学计算机科学与技术系郑纬民郑纬民论文数: 0 引用数: 0 h-index: 0机构: 清华大学计算机科学与技术系 清华大学计算机科学与技术系
- [6] 状态监测大数据存储及聚类划分研究[J]. 电工技术学报, 2013, 28(S2) (S2) : 337 - 344周国亮周国亮论文数: 0 引用数: 0 h-index: 0机构: 华北电力大学控制与计算机工程学院 不详 华北电力大学控制与计算机工程学院宋亚奇论文数: 引用数: h-index:机构:王桂兰论文数: 引用数: h-index:机构:朱永利朱永利论文数: 0 引用数: 0 h-index: 0机构: 华北电力大学控制与计算机工程学院 华北电力大学控制与计算机工程学院
- [7] 复杂装备状态监测实时流数据处理框架[J]. 计算机集成制造系统, 2013, 19 (12) : 2929 - 2939庄雪吟论文数: 引用数: h-index:机构:张力论文数: 引用数: h-index:机构:翁晓奇论文数: 引用数: h-index:机构:李虎斌论文数: 引用数: h-index:机构:刘英博论文数: 引用数: h-index:机构:
- [8] 智能电网大数据处理技术现状与挑战[J]. 电网技术, 2013, 37 (04) : 927 - 935宋亚奇论文数: 引用数: h-index:机构:周国亮周国亮论文数: 0 引用数: 0 h-index: 0机构: 华北电力大学控制与计算机学院 华北电力大学控制与计算机学院朱永利朱永利论文数: 0 引用数: 0 h-index: 0机构: 新能源电力系统国家重点实验室(华北电力大学) 华北电力大学控制与计算机学院
- [9] 基于Hadoop的广域测量系统数据处理[J]. 电力系统自动化, 2013, 37 (04) : 92 - 97曲朝阳曲朝阳论文数: 0 引用数: 0 h-index: 0机构: 东北电力大学信息工程学院朱莉朱莉论文数: 0 引用数: 0 h-index: 0机构: 东北电力大学信息工程学院张士林张士林论文数: 0 引用数: 0 h-index: 0机构: 东北电力大学信息工程学院
- [10] 数据流技术在电网自动化中的应用研究[J]. 电网技术, 2011, 35 (08) : 6 - 11赵加奎赵加奎论文数: 0 引用数: 0 h-index: 0机构: 中国电力科学研究院 中国电力科学研究院杨国凤杨国凤论文数: 0 引用数: 0 h-index: 0机构: 宁夏电力公司 中国电力科学研究院沐连顺沐连顺论文数: 0 引用数: 0 h-index: 0机构: 中国电力科学研究院 中国电力科学研究院樊涛樊涛论文数: 0 引用数: 0 h-index: 0机构: 中国电力科学研究院 中国电力科学研究院杨宁杨宁论文数: 0 引用数: 0 h-index: 0机构: 中国电力科学研究院 中国电力科学研究院王司博王司博论文数: 0 引用数: 0 h-index: 0机构: 中国电力科学研究院 中国电力科学研究院