海量电能质量数据交换格式文件快速解析方案

被引:9
作者
张逸 [1 ]
杨洪耕 [2 ]
机构
[1] 福建省电力有限公司电力科学研究院
[2] 四川大学电气信息学院
关键词
电能质量; PQDIF; 海量数据; 数据处理; 线程; 并行; 解析; .NET 4.0;
D O I
暂无
中图分类号
TM769 [电子计算机在电力系统中的应用];
学科分类号
摘要
提出了一种针对海量电能质量数据交换格式文件的快速解析方案。通过快速判断通道序列定义是否变化来避免重复解析相同的数据源记录。利用文件读取线程分解出观测值记录填入任务池中,观测值记录解析线程循环访问任务池,读取观测值记录进行解析后放入数据缓存池,实现了多线程并行解析。基于支持并行扩展的.NET 4.0编程模型实现了所提方案。对现场海量电能质量数据交换格式文件进行解析测试,测试结果显示该方案可显著提高解析效率,并且加速比随CPU核数的增加和数据文件的增多而提高。在四川电能质量一体化数据平台中的成功应用证明了该方案的可靠性和实用性。
引用
收藏
页码:116 / 121+127 +127
页数:7
相关论文
共 13 条
  • [1] 面向智能电网的新一代电能质量管理平台
    王芳
    顾伟
    袁晓冬
    周赣
    吴志
    林德清
    [J]. 电力自动化设备, 2012, 32 (07) : 134 - 139
  • [2] 电能质量数据交换格式文件通用解析方案
    张逸
    杨洪耕
    林瑞星
    王巍
    谢康
    [J]. 电力系统自动化, 2012, 36 (11) : 86 - 91
  • [3] 江苏电网电能质量评估方法及应用
    韦永忠
    郑爱霞
    袁晓冬
    陈兵
    [J]. 江苏电机工程, 2011, 30 (05) : 1 - 4
  • [4] PQDIF在嵌入式电能质量监测终端上的实现与应用
    朱伟立
    王俊
    王巍
    金耘岭
    [J]. 江苏电机工程, 2011, 30 (02) : 59 - 62+65
  • [5] 上海电网电能质量监测系统
    何维国
    谢伟
    张健
    [J]. 华东电力, 2010, 38 (04) : 497 - 499
  • [6] 面向地震数据处理的并行与分布式编程框架
    赵长海
    晏海华
    王宏琳
    史晓华
    王雷
    [J]. 石油地球物理勘探, 2010, 45 (01) : 146 - 155+164+176
  • [7] 海量COMTRADE数据并行解析算法
    桂勋
    姚兰
    钱清泉
    [J]. 电力系统自动化, 2009, 33 (15) : 62 - 66
  • [8] 浙赣电气化铁路江西段开放式电能质量监测系统的开发与应用
    范瑞祥
    辛建波
    上官帖
    孙旻
    [J]. 电网技术, 2008, (21) : 68 - 74
  • [9] 电能质量监测技术发展新趋势——网络化、信息化、标准化
    杨进
    肖湘宁
    [J]. 电力自动化设备, 2004, (11) : 83 - 87
  • [10] 分布式多线程并行处理技术在大规模化学结构检索数据库系统中的应用
    苏振强
    鲁先平
    石乐明
    [J]. 计算机与应用化学, 2004, (05) : 659 - 664