面向IEEE COMTRADE格式的海量录波数据并行压缩解压算法.pdfVIP

@ 第 33 卷第 5 期 t JJ 自锄化钱存 Vo 1.33 No.5 2013 年 5 月 Electric Power Automation Equipment May 2013 面向 IEEE COMTRADE 格式的海量剥皮数据 并行压缩/解压算法 桂勋 (电子科技大学航空航天学院，四川成都 610054) 摘要:提出了一种直接面向 IEEE COMTRADE 格式的海量故障录波数据并行压缩/解压算法。算法给出了 COMTRADE 数据文件中时间信息无损恢复公式，提出了针对状态量数据的优化 RLE 编码。对高频模拟量数 据采用提升格式小波变换，用硬阅值量化后采用基于 1277 和 Huffman 混合煽编码的 Deflate 算法进行压缩， 而对低频模拟量数据采用 RLE 编码。为有效分才比压缩 COMTRADE 数据文件，提出了一种基于高频模拟量数 据最佳小波分解层数下的最少补零的数据划分算法。映射到不同 CPU 核心的压缩/解压线程通过竞争通道 序号获取计算数据。简述了压缩文件格式及其采用的变长存储和访问技术。试验证明此算法可获得大压缩 比，并且可随着 CPU 核心数的增加和 COMTRADE 文件的增加，获得线性加速比。 关键词:数据录波; IEEE COMTRADE; 压缩;解压;数据处理; 1277; Huffman; Deflate; 小波变换 中图分类号: TM73 文献标识码: A DOI: 10.3969/j.issn.1006-6047.2013.05.024 缩、解压方案，而直接在高速以太网上传输录波文件。 。 引言 而另一方面，保信系统厂家不可能让负责上传录波文 电力系统电磁暂态过程是电力系统中短暂的、 件的子站和主站软件系统为每个录波器厂家实现复 所有的故障都伴随着相应 但非常重要的物理过程 杂的压缩/解压通信协议。正因为这两方面的原因， 的电磁暂态过程，现代电力系统故障诊断、广域保 限制了原有压缩算法的实际应用范围c 护和稳定分析愈加依赖于电网动态监测系统采集的 b. 以往压缩算法是为了解决海量录波数据的存 含丰富故障信息的暂态过程信号。因此，对电碰暂 储问题。但在电力系统内，目前所有的暂态记录格 态的监测、记录和分析一直是电力系统中一个重要的 式逐渐被统一到了 IEEE COMTRADE 1999 16 (下文 研究方向。近年来随着电子技术的快速发展，电力 简称 COMTRADE)标准上，而几乎所有的第三方暂 系统内暂态录波逐步向高采样率、连续稳态记录和海 态分析软件都是以 COMTRADE 标准为输入格式的。 C 量存储方向发展Cl 。为了提高故障录波数据的传输 因此，即使在保信系统上采用了压缩/解压通信协 效率和降低存储空间众多文献提出了各种压缩算 议，在主站上还是要解压后以 COMTRADE 标准保存， 法牛 引-2-2乞川-斗l飞5