登录注册
请使用微信扫一扫
关注公众号完成登录
摘要
为解决变电站数据采集与监视控制(supervisory control and data acquisition,SCADA)系统接入海量数据引发的数据存储问题,提出一种基于改进旋转门算法的变电站数据压缩存储方法。首先介绍了旋转门有损压缩算法,针对存储频率固定、门限值固定、忽视异常点等缺点,分别提出自适应变频数据存储策略、动态调整门限值策略和异常点记录策略以提高算法精度。其次,针对变电站SCADA系统遥信、遥控、遥调数据采用变位存储方法,遥测数据采用改进旋转门算法。最后,通过算例验证了所提方法的有效性。
01 SDT压缩算法
压缩技术分可通过某种编码方式保留数据中的关键点,降低数据的重复率。受到硬件存储容量限制,十分看重高压缩率特性,因此电力系统数据存储更适合采用有损压缩算法。
旋转门算法是一种线性拟合有损压缩算法,通过不断地构造平行四边形来选择保存的数据,只存储落在平行四边形之外的数据,不保存平行四边形之内的数据,其原理如图1所示。图1中a点是第1个压缩段的第1个数据点,在距离a点上下各为E(门限值)的坐标处有2个支点,从这2个支点穿过a点和b点构造平行四边形,该平行四边形包含a点和b点,这意味着a—b不是压缩段,这一段压缩尚未结束,继续依次考察a—c、a—d构成的平行四边形是否包含各点,发现2个支点穿过a点和d点构造的平行四边形不包含c点,则a—c是第一个压缩段,保存a点和c点,丢弃b点,第2个压缩段从d点开始,以此类推,直到遍历完所有数据点。
图1 SDT算法原理
Fig.1 Principles of the SDT algorithm
门限值E是SDT算法的唯一参数,其值的选取直接决定了压缩效果。当E值增大时,平行四边形面积增大,包含的数据点更多,这意味着丢弃的数据点更多,压缩比增大,但压缩误差也同步增大;当E值减小时,平行四边形面积减小,包含的数据点更少,这意味着丢弃的数据点变少,压缩比减小,但压缩误差也同步减小。实际应用时需要在压缩比和压缩误差之间综合权衡,找到合适的平衡点。
02 改进SDT算法
原始SDT算法计算简单方便,但也存在一些缺点,有改进空间:1)压缩周期内的所有数据点都要做平行四边形判断,即使一段时间内的数据值不变或变化很小,浪费了一定的压缩时间;2)决定压缩性能的门限值E一旦确定,在整个压缩过程中不能改变,导致可控性差;3)没有处理异常值,异常值会严重影响前后2个压缩段的性能。
鉴于此,本文针对上述3个缺点引入了3个策略,分别是自适应变频数据存储策略、动态调整门限值策略和异常点记录策略,以提高SDT算法的精度。
2.1 自适应变频数据存储策略
当前电力二次装置采集到数据上送SCADA系统通常有2种方式:周期上送和变化上送。周期上送是指每间隔一定时间,SCADA系统通过总召唤报文向装置下发数据召唤指令;变化上送是指装置检测到部分采集数据点的数据变化后,主动向SCADA系统发送数据帧。
根据SDT算法思想,本文引入了自适应变频数据存储策略,基于存储数据点的数值变化幅度动态地调整存储间隔时间,在一定时间内数据变化越平滑,存储间隔时间越大;数据变化越剧烈,存储间隔时间越小。
2.2 动态调整门限值策略
原始SDT算法只有唯一参数门限值E,E值的选取直接影响到SDT算法的压缩比和精度。SCADA系统存储数据种类很多,不同种类、不同时间的数据波动幅度偏差很大,很难找到一个固定的E值。因此,本文引入动态调整门限值策略,针对不同数据在不同时段,自适应地根据压缩误差适度调整门限值。
03 基于改进SDT算法的变电站5G数据压缩存储方法
变电站数据从装置采集、上送到SCADA系统接收、解析、存入实时库、历史库长期存储的信息流如图2所示。首先,变电站内各个装置通过电流互感器、电压互感器等各类传感器采集数据,以数据报文的方式传输给SCADA系统前置模块,这些数据主要是遥信、遥测、遥调、遥控等,也被称为“四遥”;其次,前置模块接收到数据报文后进行解析,通过基于消息总线的消息机制向实时库应用程序分门别类地发送数据信息,实时库区分存放“四遥”数据,站内监控画面上动态展示的数据源通常为实时库数据;最后,实时库应用程序向历史存储应用程序通过消息机制推送数据。本文提出的基于改进SDT算法的变电站数据压缩存储方法正是适用于最后一个历史库长期存储环节,在长期数据存储时提高压缩比,节省存储空间。
图2 变电站数据信息流
Fig.2 Substation data flow
当前变电站长期存储数据是“四遥”数据,通常按固定时间长度来保存,在数据读取时实时性要求也不高。本文结合“四遥”数据的特点,提出一种新的存储方法,将其分2类做区别处理。
1)遥信、遥控、遥调。其中遥信、遥控是状态量,只有有限的数值选项。相当数量的一部分遥信信号稳定,可能很长时间不变位;遥控指令不具有周期采样特征,只有在触发遥控时才会有遥控信号;遥调虽然是模拟量,但是和遥控类似,只有在触发遥调时才会有遥调信号。以上3类可以采用变位存储的策略,仅存储变位数据点的值和时间。
2)遥测。遥测属于模拟量,其中一些数据(如母线电压)波动小、历史曲线平稳,按固定长度存储将造成空间浪费,另一些数据(如线路有功功率)波动大,存储更多的数据点十分有必要。因此针对遥测,采用本文提出的改进SDT算法,区分不同性质的测点,利用算法自适应地分别调整各时间序列的存储时间间隔和门限值E,将电压、电流、功率区分开,针对每一个测点对应的历史时间序列(数据曲线)做存储。
本文提出的基于改进SDT算法的变电站数据压缩存储算法流程如图3所示。
图3 基于改进SDT算法的变电站数据压缩存储方法流程
Fig.3 Substation data compression and storage method process based on improved SDT algorithm
04 算例分析
压缩比S越大,代表压缩节省的空间越多,压缩性能越好。相对压缩误差R越小,代表压缩精度越高,压缩性能越好。此外,压缩和解压缩时间代表了压缩、解压缩的速度。现代计算机硬件性能发展迅速,因此压缩算法对内存的占用一般不考虑。
4.2 算例分析结果
本文选用2021年6月某5G变电站SCADA系统采集存储的四遥数据作为算例数据,遥测采集时间间隔为1 min。遥测量主要包括:主变高压侧和低压侧、负荷线路、电容器参数,以及母线的三相电压等。
为验证本文提出的改进SDT压缩算法的准确性,本文选取原始SDT算法、原始SDT+自适应变频数据存储策略(简称策略1)、原始SDT+动态调整门限值策略(简称策略2)、原始SDT+异常点记录策略(简称策略3)作为对照组,对比不同算法的压缩效果。在计算相对压缩误差R时要对压缩数据进行解压,解压数据采用的是线性插值法,其不依赖于存储时间间隔和门限值,依赖的是一个压缩段内起点到终点的斜率,因此对一个存储序列而言,动态的存储时间间隔策略和门限值策略不影响数据恢复。相比原始SDT算法,本文算法能够在压缩比S和相对压缩误差R这2个指标上取得优势,则可以验证相关调整策略的有效性和合理性。
各算法的综合性能比较如表1所示。由表1可以看出:1)原始SDT+策略1、原始SDT+策略2、原始SDT+策略3的压缩比S明显优于原始SDT算法,验证了3种策略均可以有效提升压缩比,节省存储空间;2)本文改进SDT算法的压缩比S显著优于其他算法,验证了3种策略的组合效果在压缩比提升上优于单一策略;3)原始SDT+策略2、原始SDT+策略3算法的相对压缩误差R显著优于原始SDT算法,说明策略2、策略3可以有效减少压缩误差,原始SDT+策略1的相对压缩误差R比原始SDT算法大,可能是因为存储时间间隔减少,丢失了一部分原始数据,这部分数据通过线性插值的方法还原,牺牲了一定压缩精度,但极大地提升了压缩比;4)本文改进SDT算法的压缩比S和相对压缩误差R优于原始SDT算法,说明本文算法可以有效提高原始SDT算法的压缩精度和压缩比,验证了调整策略的有效性和合理性;5)3种单一改进策略均减少了每日数据平均压缩和解压缩时间,说明每种策略都可以提高算法的时间性能;6)本文改进SDT算法的时间性能优于单一改进策略的算法时间性能。综上所述,本文改进SDT算法通过引入3种策略,相比原始SDT算法,同时有效地提高了压缩比、压缩精度和算法的时间性能,验证了本文算法的有效性。
表1 各算法性能比较
Table 1 Comparison of algorithm performance
各算法对物理数据压缩性能的比较如表2所示,在表2中,S(P)、S(Q)、S(U)、S(I)分别为对有功功率、无功功率、电压、电流的压缩比,R(P)、R(Q)、R(U) 、R(I)分别为对有功功率、无功功率、电压、电流的相对压缩误差。各类数据的存储时间间隔和门限值E不同。由表2可知,各类别数据的算法性能结果相似,没有明显的差异,本文改进SDT算法在各类别数据的压缩性能均优于原始SDT算法,验证了本文模型的有效性和准确性。
表2 各算法对物理数据压缩性能的比较
Table 2 Comparison of physical data compression performance of various algorithms
05 结语
在5G等新型技术快速发展的背景下,变电站SCADA系统在未来可能会接入海量数据,其数据存储容量将呈现几何式增长。本文提出了一种基于改进SDT算法的变电站数据压缩存储方法,为解决此问题提供一种借鉴性思路。本文分别引入了自适应变频数据存储策略、动态调整门限值策略和异常点记录策略来提高SDT算法精度,算例表明本文所提方法相比原始SDT算法,可以有效提高算法压缩比、压缩精度和时间性能。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
自“双碳”目标提出以来,我国能源电力行业坚决贯彻落实“四个革命、一个合作”能源安全新战略,着力建设新型能源体系,加快构建新型电力系统,切实把能源的饭碗牢牢端在自己手中。三组数字,可见证能源电力行业新质生产力的迸发涌现。超1/2——2025年2月,南方五省区新能源总装机容量突破2亿千瓦,新
在电力系统中,人工智能技术贯穿于发电、输电、配电和用电等各个环节,通过优化运行参数、调度策略和用电设备控制,显著减少了能源浪费和损耗,提高了整个能源链路的效率。在发电侧,人工智能可以优化发电机组的运行参数,提高发电效率;在电网侧,可以优化电力调度,减少线路损耗;在用户侧,则可以通
4月22日,两部门关于印发国家智能制造标准体系建设指南(2024版)的通知(工信部联科〔2025〕60号)。其中提到,针对电力装备行业产品种类多、个性化定制以及运维需求大等显著特点,围绕智能电网用户端及电动机等领域,制定智能工厂建设指南标准和系统集成规范;制定制造过程数字化仿真(加工过程、生
4月1日,河北省发展和改革委员会关于加快推进省级充电基础设施监管服务平台数据汇聚和智能有序充电的通知(冀发改能源[2025]397号)。要求国网河北省电力公司要进一步完善平台功能,建设智能有序充电管理模块,集成负荷预测、动态定价、远程控制等功能,结合现场实际,灵活制定接入方案,将运行中的社
4月14日至18日,中共中央总书记、国家主席习近平对越南、马来西亚、柬埔寨进行国事访问。习近平总书记同越共中央总书记苏林举行会谈时指出,构建中越命运共同体具有重要世界意义,并提出“拓展更高质量的互利合作”“系牢更加广泛的民意纽带”等六点举措。习近平主席在会见马来西亚最高元首易卜拉欣时
2025年一季度,国家电网有限公司坚持稳中求进工作总基调,完整准确全面贯彻新发展理念,深化改革创新,勇于担当作为,奋力开创国家电网高质量发展新局面。国家电网公司系统各单位全面贯彻落实国家电网公司工作部署,抓紧抓实年度重点工作任务,支撑服务经济社会高质量发展,取得积极成效。电网头条今天
4月17日,南网科技发布投资者关系活动记录表。其中指出,未来公司将实施“纵横战略”:纵向深耕低空经济领域,横向覆盖电网全场景作业,把机器人及无人机业务打造成新型电力系统的“智能管家”,推动能源电力产业向更高阶智能化阶段迈进,通过AI应用实现价值的全面提升。有投资者提问南网科技在储能方
北极星氢能网获悉,4月14日,广东广州市花都区人民政府办公室下发关于印发花都区支持新能源产业高质量发展的十条措施的通知,重点支持光伏产业、新型储能产业、氢能产业、智能电网产业。氢能产业中包含原材料(电解催化剂、电堆组件等)、制氢装备(电解槽、制氢站等)、氢储运装备、氢利用装备(加氢
4月12日,鲁中晨报车网互动充电示范站投入试运行。该站配备20台智能充电桩,其中5台为车网互动(V2G)双向充电桩。借助V2G双向充电桩,新能源汽车车主既能给车充电,也能把车作为“移动充电宝”反向送电至电网,凭电价差获得收益。作为国家首批车网互动规模化应用试点项目,淄博市车网互动V2G试点项目
3月28日,南方电网云南曲靖供电局首个透明主动配电网示范智慧台区——河边村1号公变在马龙区建成投运,这也标志着曲靖配电网数字化转型工作取得新进展,为助力乡村振兴、推进新型电力系统建设奠定坚实基础。相较于传统台区,智慧台区采用“物联网+互联网”技术,通过加装众多新型智能设备,使得电网具
4月14日,内蒙古自治区能源局关于做好智能电网国家科技重大专项2025年度项目申报有关事宜的通知(内能源科技字〔2025〕186号)。根据国家科技重大专项有关管理规定,为落实智能电网国家科技重大专项实施方案的部署要求,现将2025年度公开项目申报指南予以公布,拟安排中央财政资金约9.6亿元(战略前沿
引言在数字经济时代,算力是支撑国民经济发展的新质生产力,也是全球竞争的新焦点。2024年发布的《中国综合算力指数》报告显示,廊坊、张家口的算力指数分别居全国第一、第二。而张家口作为“东数西算”工程京津冀国家算力枢纽节点,已建成投运国家重点数据中心项目37个,服务器超172万台,算力规模达
4月23日,华电喀什新能源有限公司独立储能项目两个工程施工标段招标公告发布,项目分为两个标段,本次招标总规模500MW/2GWh,分别为①华电喀什地区100万千瓦/400万千瓦时独立储能项目巴楚30万千瓦/120万千时储能电站工程施工标段、②华电喀什地区100万千瓦/400万千瓦时独立储能项目莎车20万千瓦/80万千
4月21日,根据分布式可开放容量相关计算原则,合作市公共线路范围内的分布式发电项目可开放容量公示。
内蒙古东部地区配网供电半径长、末端小分支线路分布广,影响故障判断准确率。国网蒙东电力优化管理模式,创新应用技术手段,实现——4月18日,在蒙东赤峰元宝山区供电公司供电服务指挥中心配网调控室,4名施工人员完成了新建工作站的主机、加密装置和交换机安装工作。“预计6月底,我们将在34个旗(县
近日,南方电网云南电网公司在电网建设领域,首次将人形机器人应用于基建施工作业中。在云南省红河哈尼族彝族自治州开远市红河电厂扩建项目接入配套电网工程220千伏吉安变电站工作现场,人形机器人收到指令后,灵活地完成了接地螺栓紧固及高空引流线间隔棒安装作业。据了解,电网建设施工作业中面对高
新疆拥有得天独厚的风能、太阳能等清洁能源。截至去年底,新疆集中建成哈密、准东和南疆环塔里木3个千万千瓦级新能源基地。清洁能源的高效并网与远距离输送,需要超特高压电网的支撑。近年来,新疆加速推进超特高压电网建设,助力“风光”变“绿电”,为绿色低碳发展注入强劲动能。构建“绿电大通道”
南方电网云南电网公司22日发布消息称,近日,该公司在电网建设领域首次将人形机器人应用于基建施工作业中,这是国内首次将人形机器人用于电网建设。在云南省红河哈尼族彝族自治州开远市红河电厂扩建项目接入配套电网工程220千伏吉安变电站工作现场,一个人形机器人背着双肩包缓步走向导线展放施工现场
2024年12月19日,国家电网公司在京发布国内首个千亿级多模态行业大模型——光明电力大模型,该模型如同能源电力领域的人工智能专家,可为电网安全稳定运行、促进新能源消纳、做好供电服务提供“超级大脑”。光明电力大模型作为千亿级多模态行业大模型,能够面向电力生产、建设、管理、运营、科研、制造
4月22日,巴彦淖尔市能源集团旗下巴能(乌拉特中旗)能源管理有限公司发布了巴彦淖尔市乌拉特中旗德岭山500千伏变电站电网侧储能项目PC总承包招标公告。项目位于内蒙古自治区巴彦淖尔市乌拉特中旗德岭山镇附近,建设规模为100MW/400MWh,储能系统采用全户外预制舱式布置,户外放置80个储能电池预制舱和
国网山西省电力公司2025年第一次物资公开招标采购推荐的中标候选人公示(招标编号:052501)
广东电网公司数据显示,截至2025年第一季度,广东累计发电装机容量达2.27亿千瓦,同比增长14.1%。广东发电装机电源类型涵盖传统与新兴能源,煤电、气电、水电、核电、风电、光伏、生物质发电、储能电源等多元互补,共同构建了百花齐放的能源格局,使得广东在应对不同能源需求和环境挑战时更具灵活性和
4月23日,在上海气候周2025“气候灯塔·新纪元”主题活动上,隆基嘉兴基地作为全球光伏行业首个“灯塔工厂+零碳工厂”的双标杆实践,荣获“上海气候周气候灯塔2025年度制造灯塔典范奖”。隆基绿能浙江基地负责人刘爱军(左二)上台领奖上海气候周以“中国行动、亚洲声音、世界标准”为宗旨,由联合国和
一季度,南方电网经营区域全社会用电量3809亿千瓦时,同比增长4%,增速高于全国1.5个百分点,较1-2月累计增速提高1个百分点,体现南方区域经济运行起步平稳、开局良好,高质量发展态势持续巩固。从分产业看,一季度,南方电网经营区域第一、第二、第三产业用电量和城乡居民生活用电量同比分别增长7.4%
春潮涌动启新程,智改数转正当时。当前,湖北制造业正以“实数融合”为笔,绘就企业数智赋能、产业转型升级的新图景,从智能工厂的机器轰鸣到工业互联网的云端互联,从5G+AI的精准赋能到大数据驱动的精益管理,新一代信息技术全方位全链条普及应用逐步深入。“湖北工信”公众号分期推出《智改数转进行
一季度,南方电网经营区域全社会用电量3809亿千瓦时,同比增长4%,增速高于全国1.5个百分点,较1-2月累计增速提高1个百分点,体现南方区域经济运行起步平稳、开局良好,高质量发展态势持续巩固。从分产业看,一季度,南方电网经营区域第一、第二、第三产业用电量和城乡居民生活用电量同比分别增长7.4%
北极星氢能网获悉,4月21日,无锡市人民政府发布关于加快推动场景创新的实施意见。重点任务包括拓展产业发展新路径,聚焦“465”现代产业集群未来产业方向,加快人工智能、商业航天、氢能储能、人形机器人、量子科技等未来产业在各行业的创新应用,积极应用未来产业相关技术与产品,做深做强示范效应,
国家能源局4月18日发布一季度用电量数据,全社会用电量累计23846亿千瓦时,同比增长2.5%。分产业看,第一产业用电量314亿千瓦时,同比增长8.7%;第二产业用电量15214亿千瓦时,同比增长1.9%;第三产业用电量4465亿千瓦时,同比增长5.2%。城乡居民生活用电量3853亿千瓦时,同比增长1.5%。从数据来看,一
2025年3月,全国全行业用电指数为139.5,全行业用电量比2020年基期(以2020年基期为100)增长了39.5%,年均增长6.9%,同比增长4.8%,同比增速比1-2月提高3.2个百分点。3月,农林牧渔业用电指数为180.7,比2020年基期增长了80.7%,年均增长12.6%,同比增长9.9%,同比增速比1-2月提高1.7个百分点。3月,
2025年3月,全国全行业用电指数为139.5,全行业用电量比2020年基期(以2020年基期为100)增长了39.5%,年均增长6.9%,同比增长4.8%,同比增速比1-2月提高3.2个百分点。3月,农林牧渔业用电指数为180.7,比2020年基期增长了80.7%,年均增长12.6%,同比增长9.9%,同比增速比1-2月提高1.7个百分点。3月,
4月18日,四川省经信厅关于印发《四川省新能源产业链建圈强链工作方案(2025—2027年)》的通知,通知指出,到2027年,主要承载地和协同发展地融合态势基本形成,新能源产业链关键材料、核心技术和装备自主可控水平大幅提升,市场机制、标准体系和管理体制更加健全,链主链核企业规模实力不断壮大,产
4月17日,工业和信息化部办公厅关于组织开展2025年工业互联网一体化进园区“百城千园行”活动的通知(工信厅信管函〔2025〕144号)。其中指出,引导园区企业加快5G/5G-A、时间敏感网络、人工智能、区块链、工业光网、信息模型、开放自动化、边缘计算等新一代信息通信技术与工业互联网的深度融合应用。
北极星储能网获悉,4月16日,广东韶关市人民政府发布关于印发韶关市推进分布式光伏高质量发展行动。文件明确,积极拓宽光伏多元化应用场景。大力推进光伏建筑一体化建设,积极推动光伏与道路交通、5G基站、大数据中心、充电桩等基础设施建设的融合。积极发展以分布式光伏为主的微电网、直流配电网,扩
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!