基于Storm的城市消防联网远程监控系统的实时数据处理应用

被引:3
作者
杨素素
机构
[1] 首都师范大学信息工程学院
关键词
Storm; 消防预警; 大数据实时处理; 云计算;
D O I
10.16526/j.cnki.11-4762/tp.2017.03.016
中图分类号
TP277 [监视、报警、故障诊断系统]; TU998.1 [消防];
学科分类号
0804 ; 080401 ; 080402 ; 0306 ; 0837 ; 0838 ;
摘要
针对城市消防联网远程监控系统中实时信息数据逐渐增长而引出的大数据问题,传统的消防系统无法实时、高效地处理消防实时数据的问题,提出了一种基于云计算和Storm实时数据处理系统的解决方案;对于开源的Storm框架进行需求和性能分析,实现对其技术架构上的改进,并结合消防系统的特点,提出一套高实时性、高可扩展性的消防联网监控中心的数据实时处理的体系架构,同时也进行了云计算平台的搭建,利用心跳检测机制保证各个监控单位的实时性连接;研究表明,基于云计算和Storm平台架构完全适用于消防联网监控中心的实时消防数据的处理,具有高效性、高可靠性、性能显著等特性。
引用
收藏
页码:55 / 59
页数:5
相关论文
共 12 条
  • [1] Stream:The stanford stream data manager. Arvind Arasu,Brian Babcock,Shivnath Babu,Mayur Datar,Keith Ito,Rajeev Motwani,Itaru Nishizawa,Utkarsh Srivastava,Dilys Thomas,Rohit Varma,Jennifer Widom. IEEE Data Eng.Bull . 2003
  • [2] The design of the borealis stream processing engine. Daniel J Abadi,Yanif Ahmad,Magdalena Balazinska,Ugur Cetintemel,Mitch Cherniack,Jeong-Hyon Hwang,Wolfgang Lindner,Anurag Maskey,Alex Rasin,Esther Ryvkina,Nesime Tatbul,Ying Xing,Stanley B.Zdonik. CIDR . 2005
  • [3] Millwheel:Faulttolerant stream processing at internet scale. Akidau T,Balikov A,Bekiroglu K,et al. PVLDB . 2013
  • [4] Continuous Queries in Oracle. Sankar Subramanian,Srikanth Bellamkonda,Hua-Gang Li,Vince Liang,Lei Sheng,Wayne Smith,James Terry,TsaeFeng Yu,Andrew Witkowski. VLDB 2007 .
  • [5] IBM Infosphere Streams. http://www03.ibm.com/software/products/en/infosphere-streams/ .
  • [6] Photon:fault-tolerant and scalable joining of continuous data streams. Rajagopal Ananthanarayanan,Venkatesh Basker,Sumit Das,Ashish Gupta,Haifeng Jiang,Tianhao Qiu,Alexey Reznichenko,Deomid Ryabkov,Manpreet Singh,Shivakumar Venkataraman. SIGMOD Conference . 2013
  • [7] The extensibility framework in Microsoft StreamInsight. Mohamed H.Ali,Badrish Chandramouli,Jonathan Goldstein,Roman Schindlauer. ICDE 2011 .
  • [8] S4Distributed stream computing platform. http://incubator.apache.org/s4/ .
  • [9] Apache Hadoop goes realtime at Facebook. Borthakur D,Sarma JS,Gray J,Muthukkaruppan K,Spigeglberg N,Kuang HR,Ranganathan K,Molkov D,Mennon A,Rash S,Schmidt R,Aiyer A. Proc.Of the ACM SIGMOD Int"1Conf.on management of Data (SIGMOD 2011and PODS 2011). . 2011
  • [10] Spark Streaming. http://spark.incubator.apache.org/docs/latest/streaming-programming-guide.html .