面向农业物联网应用层的SCADA系统性能优化研究

被引:0
作者
陈秋红
机构
[1] 浙江大学
关键词
农业物联网; SCADA系统; IOCP; 无锁数据结构; JSON; TLV; 数据流处理;
D O I
暂无
年度学位
2016
学位类型
硕士
导师
摘要
物联网技术快速发展并在农业领域得到了广泛应用。随着农业物联网应用规模的扩大和网络通信量的增加,农业物联网应用层SCADA系统会遇到感知识别采集终端高并发的数据访问、数据标准异构导致通信协议消息格式在通用性、结构化和效率上难以实现平衡以及针对数据流快速响应和实时处理等问题。本文将农业SCADA系统抽象为一般功能模型,并根据数据流动过程分别研究数据采集、数据处理和数据存储子系统相关设计和优化技术,旨在提高系统通信并发性能的同时优化系统的数据处理能力。本文主要完成了以下几项工作:1、针对农业物联网应用层SCADA系统的通用性,将系统抽象为功能模型,分别从基于windows的网络通信模型、基于应用层协议和数据流处理算法的数据处理过程、基于连接池和查询优化的数据存储过程,探讨了提高系统数据处理能力的技术。2、针对完成端口机制中的信息定位、资源管理、内存页锁定和数据包处理等问题进行分析,优化了基于线程私有链表的对象池,提出了基于无锁数据结构、CAS机制和任务窃取的线程私有链表对象池优化策略,解决了线程池对共享资源的并行访问效率低的问题。3、针对数据标准不一致引起的通信协议消息格式混乱问题,提出了基于JSON和TLV的数据格式,解决了传感数据传输及解析低效问题,使数据传输和解析过程在占用带宽/内存和响应时间之间取得更好平衡;同时,针对农业物联网数据流的特点和处理需求,提出了适用于农业SCADA系统的数据流实时处理算法。4、设计并搭建了一种面向农业物联网应用层的农业SCADA系统,实现了农场的远程管理。系统验证了SCADA模型的通用性,解决了SCADA系统在面对大规模数据并发访问和处理时的性能问题。经过实际应用表明,在面对高速率数据访问请求时,对网络通信优化提高了系统并发连接网关的数量和通信效率,而协议格式优化提高了数据传输效率和数据包封装/解析效率,通过数据流处理算法降低系统的内存使用率同时提高输出结果的实时更新效率。
引用
收藏
页数:123
共 66 条
[1]
面向养殖环境监测的数据流处理方法研究 [D]. 
曹振丽 .
中国农业大学,
2015
[2]
物联网应用若干关键问题的研究.[D].周明.北京邮电大学.2014, 04
[3]
数据流概要与数据流分析若干关键问题研究 [D]. 
王永利 .
东南大学,
2006
[4]
SCADA系统中海量数据采集及存储策略的研究与实现 [D]. 
刘孟昕 .
北京邮电大学,
2015
[5]
OPC技术与分布式实时数据库在SCADA系统中的开发与应用 [D]. 
崔嵩 .
山东大学,
2014
[6]
SCADA系统中消息中间件的设计与实现.[D].陈晨.北京邮电大学.2014, 04
[7]
基于物联网的猪舍环境监控系统研究 [D]. 
吴武豪 .
浙江大学,
2014
[8]
面向物联网监控系统的高性能通信服务设计与实现.[D].庞强.北京邮电大学.2014, 04
[9]
基于物联网技术的北方设施农业环境数据监测与控制系统研究 [D]. 
白冰 .
中国农业科学院,
2013
[10]
通用物联网数据采集与分析平台的研究与实现 [D]. 
耿盼盼 .
中国海洋大学,
2013