登录注册
请使用微信扫一扫
关注公众号完成登录
摘要
为解决变电站数据采集与监视控制(supervisory control and data acquisition,SCADA)系统接入海量数据引发的数据存储问题,提出一种基于改进旋转门算法的变电站数据压缩存储方法。首先介绍了旋转门有损压缩算法,针对存储频率固定、门限值固定、忽视异常点等缺点,分别提出自适应变频数据存储策略、动态调整门限值策略和异常点记录策略以提高算法精度。其次,针对变电站SCADA系统遥信、遥控、遥调数据采用变位存储方法,遥测数据采用改进旋转门算法。最后,通过算例验证了所提方法的有效性。
01 SDT压缩算法
压缩技术分可通过某种编码方式保留数据中的关键点,降低数据的重复率。受到硬件存储容量限制,十分看重高压缩率特性,因此电力系统数据存储更适合采用有损压缩算法。
旋转门算法是一种线性拟合有损压缩算法,通过不断地构造平行四边形来选择保存的数据,只存储落在平行四边形之外的数据,不保存平行四边形之内的数据,其原理如图1所示。图1中a点是第1个压缩段的第1个数据点,在距离a点上下各为E(门限值)的坐标处有2个支点,从这2个支点穿过a点和b点构造平行四边形,该平行四边形包含a点和b点,这意味着a—b不是压缩段,这一段压缩尚未结束,继续依次考察a—c、a—d构成的平行四边形是否包含各点,发现2个支点穿过a点和d点构造的平行四边形不包含c点,则a—c是第一个压缩段,保存a点和c点,丢弃b点,第2个压缩段从d点开始,以此类推,直到遍历完所有数据点。
图1 SDT算法原理
Fig.1 Principles of the SDT algorithm
门限值E是SDT算法的唯一参数,其值的选取直接决定了压缩效果。当E值增大时,平行四边形面积增大,包含的数据点更多,这意味着丢弃的数据点更多,压缩比增大,但压缩误差也同步增大;当E值减小时,平行四边形面积减小,包含的数据点更少,这意味着丢弃的数据点变少,压缩比减小,但压缩误差也同步减小。实际应用时需要在压缩比和压缩误差之间综合权衡,找到合适的平衡点。
02 改进SDT算法
原始SDT算法计算简单方便,但也存在一些缺点,有改进空间:1)压缩周期内的所有数据点都要做平行四边形判断,即使一段时间内的数据值不变或变化很小,浪费了一定的压缩时间;2)决定压缩性能的门限值E一旦确定,在整个压缩过程中不能改变,导致可控性差;3)没有处理异常值,异常值会严重影响前后2个压缩段的性能。
鉴于此,本文针对上述3个缺点引入了3个策略,分别是自适应变频数据存储策略、动态调整门限值策略和异常点记录策略,以提高SDT算法的精度。
2.1 自适应变频数据存储策略
当前电力二次装置采集到数据上送SCADA系统通常有2种方式:周期上送和变化上送。周期上送是指每间隔一定时间,SCADA系统通过总召唤报文向装置下发数据召唤指令;变化上送是指装置检测到部分采集数据点的数据变化后,主动向SCADA系统发送数据帧。
根据SDT算法思想,本文引入了自适应变频数据存储策略,基于存储数据点的数值变化幅度动态地调整存储间隔时间,在一定时间内数据变化越平滑,存储间隔时间越大;数据变化越剧烈,存储间隔时间越小。
2.2 动态调整门限值策略
原始SDT算法只有唯一参数门限值E,E值的选取直接影响到SDT算法的压缩比和精度。SCADA系统存储数据种类很多,不同种类、不同时间的数据波动幅度偏差很大,很难找到一个固定的E值。因此,本文引入动态调整门限值策略,针对不同数据在不同时段,自适应地根据压缩误差适度调整门限值。
03 基于改进SDT算法的变电站5G数据压缩存储方法
变电站数据从装置采集、上送到SCADA系统接收、解析、存入实时库、历史库长期存储的信息流如图2所示。首先,变电站内各个装置通过电流互感器、电压互感器等各类传感器采集数据,以数据报文的方式传输给SCADA系统前置模块,这些数据主要是遥信、遥测、遥调、遥控等,也被称为“四遥”;其次,前置模块接收到数据报文后进行解析,通过基于消息总线的消息机制向实时库应用程序分门别类地发送数据信息,实时库区分存放“四遥”数据,站内监控画面上动态展示的数据源通常为实时库数据;最后,实时库应用程序向历史存储应用程序通过消息机制推送数据。本文提出的基于改进SDT算法的变电站数据压缩存储方法正是适用于最后一个历史库长期存储环节,在长期数据存储时提高压缩比,节省存储空间。
图2 变电站数据信息流
Fig.2 Substation data flow
当前变电站长期存储数据是“四遥”数据,通常按固定时间长度来保存,在数据读取时实时性要求也不高。本文结合“四遥”数据的特点,提出一种新的存储方法,将其分2类做区别处理。
1)遥信、遥控、遥调。其中遥信、遥控是状态量,只有有限的数值选项。相当数量的一部分遥信信号稳定,可能很长时间不变位;遥控指令不具有周期采样特征,只有在触发遥控时才会有遥控信号;遥调虽然是模拟量,但是和遥控类似,只有在触发遥调时才会有遥调信号。以上3类可以采用变位存储的策略,仅存储变位数据点的值和时间。
2)遥测。遥测属于模拟量,其中一些数据(如母线电压)波动小、历史曲线平稳,按固定长度存储将造成空间浪费,另一些数据(如线路有功功率)波动大,存储更多的数据点十分有必要。因此针对遥测,采用本文提出的改进SDT算法,区分不同性质的测点,利用算法自适应地分别调整各时间序列的存储时间间隔和门限值E,将电压、电流、功率区分开,针对每一个测点对应的历史时间序列(数据曲线)做存储。
本文提出的基于改进SDT算法的变电站数据压缩存储算法流程如图3所示。
图3 基于改进SDT算法的变电站数据压缩存储方法流程
Fig.3 Substation data compression and storage method process based on improved SDT algorithm
04 算例分析
压缩比S越大,代表压缩节省的空间越多,压缩性能越好。相对压缩误差R越小,代表压缩精度越高,压缩性能越好。此外,压缩和解压缩时间代表了压缩、解压缩的速度。现代计算机硬件性能发展迅速,因此压缩算法对内存的占用一般不考虑。
4.2 算例分析结果
本文选用2021年6月某5G变电站SCADA系统采集存储的四遥数据作为算例数据,遥测采集时间间隔为1 min。遥测量主要包括:主变高压侧和低压侧、负荷线路、电容器参数,以及母线的三相电压等。
为验证本文提出的改进SDT压缩算法的准确性,本文选取原始SDT算法、原始SDT+自适应变频数据存储策略(简称策略1)、原始SDT+动态调整门限值策略(简称策略2)、原始SDT+异常点记录策略(简称策略3)作为对照组,对比不同算法的压缩效果。在计算相对压缩误差R时要对压缩数据进行解压,解压数据采用的是线性插值法,其不依赖于存储时间间隔和门限值,依赖的是一个压缩段内起点到终点的斜率,因此对一个存储序列而言,动态的存储时间间隔策略和门限值策略不影响数据恢复。相比原始SDT算法,本文算法能够在压缩比S和相对压缩误差R这2个指标上取得优势,则可以验证相关调整策略的有效性和合理性。
各算法的综合性能比较如表1所示。由表1可以看出:1)原始SDT+策略1、原始SDT+策略2、原始SDT+策略3的压缩比S明显优于原始SDT算法,验证了3种策略均可以有效提升压缩比,节省存储空间;2)本文改进SDT算法的压缩比S显著优于其他算法,验证了3种策略的组合效果在压缩比提升上优于单一策略;3)原始SDT+策略2、原始SDT+策略3算法的相对压缩误差R显著优于原始SDT算法,说明策略2、策略3可以有效减少压缩误差,原始SDT+策略1的相对压缩误差R比原始SDT算法大,可能是因为存储时间间隔减少,丢失了一部分原始数据,这部分数据通过线性插值的方法还原,牺牲了一定压缩精度,但极大地提升了压缩比;4)本文改进SDT算法的压缩比S和相对压缩误差R优于原始SDT算法,说明本文算法可以有效提高原始SDT算法的压缩精度和压缩比,验证了调整策略的有效性和合理性;5)3种单一改进策略均减少了每日数据平均压缩和解压缩时间,说明每种策略都可以提高算法的时间性能;6)本文改进SDT算法的时间性能优于单一改进策略的算法时间性能。综上所述,本文改进SDT算法通过引入3种策略,相比原始SDT算法,同时有效地提高了压缩比、压缩精度和算法的时间性能,验证了本文算法的有效性。
表1 各算法性能比较
Table 1 Comparison of algorithm performance
各算法对物理数据压缩性能的比较如表2所示,在表2中,S(P)、S(Q)、S(U)、S(I)分别为对有功功率、无功功率、电压、电流的压缩比,R(P)、R(Q)、R(U) 、R(I)分别为对有功功率、无功功率、电压、电流的相对压缩误差。各类数据的存储时间间隔和门限值E不同。由表2可知,各类别数据的算法性能结果相似,没有明显的差异,本文改进SDT算法在各类别数据的压缩性能均优于原始SDT算法,验证了本文模型的有效性和准确性。
表2 各算法对物理数据压缩性能的比较
Table 2 Comparison of physical data compression performance of various algorithms
05 结语
在5G等新型技术快速发展的背景下,变电站SCADA系统在未来可能会接入海量数据,其数据存储容量将呈现几何式增长。本文提出了一种基于改进SDT算法的变电站数据压缩存储方法,为解决此问题提供一种借鉴性思路。本文分别引入了自适应变频数据存储策略、动态调整门限值策略和异常点记录策略来提高SDT算法精度,算例表明本文所提方法相比原始SDT算法,可以有效提高算法压缩比、压缩精度和时间性能。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
沙特阿拉伯国家电力公司(以下简称“SEC”)、沙特阿拉伯国家电网公司(以下简称“NG”)和华为数字能源正式签署电网仿真测试合作协议,三方将联合建设电网仿真测试平台,基于实时数字仿真(RTDS)技术,部署在SEC的RTDS实验室,构建新能源接入电网的性能研究能力。三方合作紧扣全球清洁能源转型趋势,
北极星储能网获悉,7月4日,深圳坪山区人民政府发布《深圳市坪山区落实“双碳”战略进一步推动新能源产业高质量发展的若干措施》。其中指出,支持企业建设新型电池及储能、充电设施、光伏、氢能、智能电网和综合能源服务等领域中试生产线,对项目总投资额(不含土建)在500万元以上的,按设备投资额的1
7月9日,正泰智能电气(华南)科创产业园开工仪式在佛山市南海区丹灶镇举行。基地总投资50亿元,占地面积约100亩,以“科创智造标杆”“绿质生态典范”“数智卓越运营”为核心定位,聚焦新型电力装备、新能源、通信与智算中心三大领域,全力打造“研发、制造、服务”一体化全产业链平台。该项目不仅是
7月9日,市场监管总局、工业和信息化部发布的《计量支撑产业新质生产力发展行动方案》指出,面向太阳能、风能、核能、氢能、海洋能、生物质能、地热能等领域,围绕关键核心技术装备自主化发展、能源生产储运基础设施建设、储能系统及相关装备研究及产业化等方向计量需求,开展新能源汽车充换电、核电安
北极星售电网获悉,6月30日,广东汕尾市发展和改革局发布关于公开征求《汕尾市支持新能源汽车产业高质量发展的若干政策措施(修订)(征求意见稿)》意见的公告。文件明确,所在地电网企业应支持充电桩业主安装独立电表,对已安装独立电表的充电桩统一按大工业用电峰谷电价计费并免收基础电费。电网企
近日,国网江苏省电力有限公司经济技术研究院自主研发的架空输电线路三维正向设计交互平台正式上线。该平台可开展架空输电线路一键标准化三维设计,为电网设计、运维等多阶段工作提供数据支持。据介绍,“正向设计”是指从设计构思出发,通过参数化建模,将抽象概念逐步转化为三维模型的创新设计方法。
上海电气入选福布斯中国“可持续发展工业企业”名单近日,上海电气成功入选“2024-2025福布斯中国可持续发展工业企业”主评选名单,彰显了上海电气在引领中国工业可持续发展进程中的标杆示范价值。该评选由福布斯中国推出,旨在发掘中国工业在可持续发展领域的最新成就,面向年营收超200亿人民币的企业
北极星售电网获悉,7月4日,深圳坪山区人民政府发布关于印发《深圳市坪山区落实“双碳”战略进一步推动新能源产业高质量发展的若干措施》的通知。文件明确,鼓励建设资源聚合平台并接入深圳市虚拟电厂管理中心参与电网调控,开展数字能源服务衍生业务。对虚拟电厂资源聚合平台投资主体每年按响应收益的
第五章电力行业发展本章作者王雪辰(中能传媒能源安全新战略研究院)一、电力生产01全国发电量同比增长6.7%,电力生产供应能力进一步提升2024年,全国全年电力系统运行保持稳定,供需总体平稳,电力生产供应能力进一步提升。《2024年国民经济和社会发展统计公报》显示,2024年全国规模以上电厂发电量10
7月3日,广东肇庆南街街道分布式光伏发电项目投资开发主体遴选公告发布。自签署合作框架协议之日起按两年周期计算(以实际的开工建设日期为准)。遴选范围及总体可开发资源:1、居民部分:全街道潜在可开发分布式光伏发电约5000户。2、目前可开发资源将根据广宁县供电局提供具体的变压器容量及规模,综
记者从内蒙古自治区能源局获悉,2025年上半年,内蒙古新开工建设独立新型储能电站34个,总装机规模达到1480万千瓦,全区新型储能电站建设步伐加快。近期,一批独立新型储能电站项目在内蒙古集中开工。6月26日,乌兰察布市察右中旗100万千瓦/600万千瓦时新型储能电站项目开工;6月28日,鄂尔多斯市谷山
华能吉林分公司新能源开发公司5个风电项目可研勘察设计咨询服务招标公告(招标编号:HNZB2025-07-3-142)项目所在地区:吉林省1.招标条件本华能吉林分公司新能源开发公司5个风电项目可研勘察设计咨询服务项目,已由项目审批机关批准,项目资金为企业自筹,招标人为华能吉林清洁能源发电有限公司、华能吉林
北极星风力发电网获悉,7月10日,国家电投发布《国家电力投资集团有限公司二〇二四年度第69批集中招标(广西钦州海上风电示范项目220kV/66kV海缆和220kV陆缆及附件)中标候选人公示》。《公示》显示,第一中标候选人:江苏亨通高压海缆有限公司,投标报价:82126.380577万元。第二中标候选人:青岛汉缆
7月9日,攀钢集团江油长城特殊钢有限公司储能项目采购公告发布,招标人拟在攀长特公司厂区内建设分布式储能系统,通过储能系统为生产、生活提供一定的用电电量,减少国网供电负荷,并节省最终用户的用电成本。使用于用电尖峰时段,减少尖峰时段部分用电成本,以获取最大化的收益。本项目储能系统建设规
为全面提升电网设备状态感知能力与风险预警水平,保障迎峰度夏期间电网安全可靠运行,张家口供电公司超高压输变电运检中心于7月8日在500千伏白土窑变电站及500千伏水官坊变电站主变压器侧,全面启动并完成了局放在线监测装置的安装部署工作。此举标志着中心在推进变电站智能化运维、实现设备状态精准管
北极星输配电网获悉,日前,桃合木500千伏新能源汇集输变电工程、铝都-平川500千伏线路工程投运。桃合木500千伏新能源汇集输变电工程新建桃合木500千伏变电站,站址位于内蒙古自治区兴安盟科右中旗,安装1组1200兆伏安主变压器,新建500千伏出线间隔4个,将铝都-平川双回500千伏线路开断接入桃合木变,
北极星输配电网获悉,近期,贵州省生态环境厅受理了500千伏关岭输变电工程环境影响评价文件情况予以公示,公示期为2025年7月9日—2025年7月23日(10个工作日)。建设项目名称:500千伏关岭输变电工程建设地点:贵州省安顺市、贵阳市、黔南州建设单位名称:贵州电网有限责任公司建设分公司项目简况:本
北极星风力发电网获悉,7月9日,中节能风力发电股份有限公司(以下简称“节能风电”或“公司”)发布《对外投资公告》。公告显示,节能风电于2025年7月8日召开第五届董事会第三十七次会议审议通过了《关于投资建设中节能察右前旗(兴和县)50万千瓦工业园区绿色供电项目的议案》,同意投资建设中节能察
为贯彻落实《四川省人民代表大会常务委员会关于加快电网规划建设的决定》,提高四川省电网建设项目审批效能,加快全省电网规划建设,着力构建更加安全可靠的电力系统,保障人民群众生产生活用电需要,四川省发展改革委研究起草了《关于贯彻落实四川省人民代表大会常务委员会关于加快电网规划建设的决定
甘肃武威供电公司深入学习贯彻习近平总书记关于安全生产、能源保供的重要论述和重要指示批示精神,坚持“两个至上”,以安全生产治本攻坚三年行动为抓手,全力防治风险隐患,护航企业和电网高质量发展。扛牢政治首责,筑牢隐患查治安全防线。武威供电公司时刻绷紧安全生产这根弦,把安全发展理念贯穿工
今年全国“安全生产月”以“人人讲安全、个个会应急——查找身边安全隐患”为主题,深刻揭示了安全工作的核心内容,管安全要抓早抓小治未病,着眼前置管理,坚持预防为主。湖北孝感供电公司坚决贯彻习近平总书记关于安全生产、能源保供的重要论述和重要指示批示精神,以治本攻坚为抓手,全力防风险、治
7月9日,国家电网有限公司总经理、党组副书记庞骁刚赴国网冀北电力检查迎峰度夏供电保障工作,看望慰问一线干部员工。庞骁刚先后前往秦皇岛供电公司河东寨变电站、北戴河暑期保电中心和国网冀北电力北戴河供电保障指挥大厅等地,检查电网运行、电力保供、安全管理、应急响应、优质服务等方面工作,听取
北极星售电网获悉,7月10日,海南省人民政府发布关于印发《海南低碳岛建设方案》(以下简称《方案》)的通知。《方案》指出,2030年前,全省实现碳达峰,经济社会发展向低碳方向快速迈进。2045年前,全面建成低碳岛,全省二氧化碳年排放量比峰值期下降70%,建成零碳、高效、智慧、韧性、安全的新型能源
近期,国家能源局围绕保障能源安全和绿色低碳转型,促进新技术、新产业、新业态发展,集中发布了一批重点行业标准。一、引领能源新技术、新产业、新业态发展(一)《分布式调相机并网技术规定》。适用于新建或改扩建分布式调相机的并网设计和测试,规定了分布式调相机的并网原则,并在无功电压控制、运
近期,国家能源局围绕保障能源安全和绿色低碳转型,促进新技术、新产业、新业态发展,集中发布了一批重点行业标准。一、引领能源新技术、新产业、新业态发展(一)《分布式调相机并网技术规定》。适用于新建或改扩建分布式调相机的并网设计和测试,规定了分布式调相机的并网原则,并在无功电压控制、运
7月9日,国务院新闻办公室举行“高质量完成‘十四五’规划”系列主题新闻发布会。国家发展改革委主任郑栅洁介绍,“十四五”时期,能源综合生产能力进展超过预期。“十四五”规划把创新提到前所未有的重要位置,加上大型LNG运输船全球领先;全球第一座第四代核电站石岛湾基地投入商业运行。“用能”更
7月9日,国务院新闻办公室举行“高质量完成‘十四五’规划”系列主题新闻发布会。国家发展改革委主任郑栅洁介绍,“十四五”时期,能源综合生产能力进展超过预期。“十四五”规划把创新提到前所未有的重要位置,加上大型LNG运输船全球领先;全球第一座第四代核电站石岛湾基地投入商业运行。“用能”更
北极星储能获悉,2025年7月9日上午10时国务院新闻办公室举行“高质量完成‘十四五’规划”系列主题新闻发布会。国家发展改革委秘书长袁达在发言中指出,商品消费方面,人工智能加速融入日常生产生活,智能手机、智能家居、智能汽车等广受消费者欢迎。有效投资的增加,通过生产等链条促进居民就业增收,
北极星碳管家网获悉,7月7日,天津市工业和信息化局天津市委网信办天津市发展改革委天津市科技局天津市财政局发布关于修订印发天津市推动制造业高质量发展若干政策措施实施细则的通知。内容指出,支持工业企业高质量投资,给予最高5000万元支持;推进产业基础再造,给予最高3000万元支持。全文如下:市
全球绿色低碳浪潮下,中国绿色认证市场呈现爆发式增长。《2025—2030年中国绿色认证服务行业全景评估与发展战略研究报告》显示,2020—2024年中国绿色认证市场规模从28亿元激增至182亿元,年复合增长率达45.7%,远超全球平均水平,预计2030年将突破800亿元。本文将深入梳理南方电网公司绿色低碳评价认
近来备受关注的虚拟电厂究竟有何“实”力?(来源:中国能源观察作者:曲艺)看向需求侧。2024年7月,国家发展改革委、国家能源局、国家数据局发布《加快构建新型电力系统行动方案(2024#x2014;2027年)》提出,以“小切口”解决“大问题”,提升电网对清洁能源的接纳、配置、调控能力。在2024#x2014;2
7月7日,天津市工业和信息化局天津市委网信办天津市发展改革委天津市科技局天津市财政局发布关于修订印发天津市推动制造业高质量发展若干政策措施实施细则的通知。内容指出,支持新能源发展。围绕先进新型电池(锂电池、半/全固态电池、钠离子电池、氢燃料电池等)产品及关键材料,高效光伏产品、风电
北极星储能网获悉,7月8日消息,天津市工业和信息化局市委网信办市发展改革委市科技局市财政局关于修订印发天津市推动制造业高质量发展若干政策措施实施细则的通知,提到,围绕先进新型电池(锂电池、半/全固态电池、钠离子电池、氢燃料电池等)产品及关键材料,高效光伏产品、风电整机及关键部件,制
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!