登录注册
请使用微信扫一扫
关注公众号完成登录
摘要
为解决变电站数据采集与监视控制(supervisory control and data acquisition,SCADA)系统接入海量数据引发的数据存储问题,提出一种基于改进旋转门算法的变电站数据压缩存储方法。首先介绍了旋转门有损压缩算法,针对存储频率固定、门限值固定、忽视异常点等缺点,分别提出自适应变频数据存储策略、动态调整门限值策略和异常点记录策略以提高算法精度。其次,针对变电站SCADA系统遥信、遥控、遥调数据采用变位存储方法,遥测数据采用改进旋转门算法。最后,通过算例验证了所提方法的有效性。
01 SDT压缩算法
压缩技术分可通过某种编码方式保留数据中的关键点,降低数据的重复率。受到硬件存储容量限制,十分看重高压缩率特性,因此电力系统数据存储更适合采用有损压缩算法。
旋转门算法是一种线性拟合有损压缩算法,通过不断地构造平行四边形来选择保存的数据,只存储落在平行四边形之外的数据,不保存平行四边形之内的数据,其原理如图1所示。图1中a点是第1个压缩段的第1个数据点,在距离a点上下各为E(门限值)的坐标处有2个支点,从这2个支点穿过a点和b点构造平行四边形,该平行四边形包含a点和b点,这意味着a—b不是压缩段,这一段压缩尚未结束,继续依次考察a—c、a—d构成的平行四边形是否包含各点,发现2个支点穿过a点和d点构造的平行四边形不包含c点,则a—c是第一个压缩段,保存a点和c点,丢弃b点,第2个压缩段从d点开始,以此类推,直到遍历完所有数据点。
图1 SDT算法原理
Fig.1 Principles of the SDT algorithm
门限值E是SDT算法的唯一参数,其值的选取直接决定了压缩效果。当E值增大时,平行四边形面积增大,包含的数据点更多,这意味着丢弃的数据点更多,压缩比增大,但压缩误差也同步增大;当E值减小时,平行四边形面积减小,包含的数据点更少,这意味着丢弃的数据点变少,压缩比减小,但压缩误差也同步减小。实际应用时需要在压缩比和压缩误差之间综合权衡,找到合适的平衡点。
02 改进SDT算法
原始SDT算法计算简单方便,但也存在一些缺点,有改进空间:1)压缩周期内的所有数据点都要做平行四边形判断,即使一段时间内的数据值不变或变化很小,浪费了一定的压缩时间;2)决定压缩性能的门限值E一旦确定,在整个压缩过程中不能改变,导致可控性差;3)没有处理异常值,异常值会严重影响前后2个压缩段的性能。
鉴于此,本文针对上述3个缺点引入了3个策略,分别是自适应变频数据存储策略、动态调整门限值策略和异常点记录策略,以提高SDT算法的精度。
2.1 自适应变频数据存储策略
当前电力二次装置采集到数据上送SCADA系统通常有2种方式:周期上送和变化上送。周期上送是指每间隔一定时间,SCADA系统通过总召唤报文向装置下发数据召唤指令;变化上送是指装置检测到部分采集数据点的数据变化后,主动向SCADA系统发送数据帧。
根据SDT算法思想,本文引入了自适应变频数据存储策略,基于存储数据点的数值变化幅度动态地调整存储间隔时间,在一定时间内数据变化越平滑,存储间隔时间越大;数据变化越剧烈,存储间隔时间越小。
2.2 动态调整门限值策略
原始SDT算法只有唯一参数门限值E,E值的选取直接影响到SDT算法的压缩比和精度。SCADA系统存储数据种类很多,不同种类、不同时间的数据波动幅度偏差很大,很难找到一个固定的E值。因此,本文引入动态调整门限值策略,针对不同数据在不同时段,自适应地根据压缩误差适度调整门限值。
03 基于改进SDT算法的变电站5G数据压缩存储方法
变电站数据从装置采集、上送到SCADA系统接收、解析、存入实时库、历史库长期存储的信息流如图2所示。首先,变电站内各个装置通过电流互感器、电压互感器等各类传感器采集数据,以数据报文的方式传输给SCADA系统前置模块,这些数据主要是遥信、遥测、遥调、遥控等,也被称为“四遥”;其次,前置模块接收到数据报文后进行解析,通过基于消息总线的消息机制向实时库应用程序分门别类地发送数据信息,实时库区分存放“四遥”数据,站内监控画面上动态展示的数据源通常为实时库数据;最后,实时库应用程序向历史存储应用程序通过消息机制推送数据。本文提出的基于改进SDT算法的变电站数据压缩存储方法正是适用于最后一个历史库长期存储环节,在长期数据存储时提高压缩比,节省存储空间。
图2 变电站数据信息流
Fig.2 Substation data flow
当前变电站长期存储数据是“四遥”数据,通常按固定时间长度来保存,在数据读取时实时性要求也不高。本文结合“四遥”数据的特点,提出一种新的存储方法,将其分2类做区别处理。
1)遥信、遥控、遥调。其中遥信、遥控是状态量,只有有限的数值选项。相当数量的一部分遥信信号稳定,可能很长时间不变位;遥控指令不具有周期采样特征,只有在触发遥控时才会有遥控信号;遥调虽然是模拟量,但是和遥控类似,只有在触发遥调时才会有遥调信号。以上3类可以采用变位存储的策略,仅存储变位数据点的值和时间。
2)遥测。遥测属于模拟量,其中一些数据(如母线电压)波动小、历史曲线平稳,按固定长度存储将造成空间浪费,另一些数据(如线路有功功率)波动大,存储更多的数据点十分有必要。因此针对遥测,采用本文提出的改进SDT算法,区分不同性质的测点,利用算法自适应地分别调整各时间序列的存储时间间隔和门限值E,将电压、电流、功率区分开,针对每一个测点对应的历史时间序列(数据曲线)做存储。
本文提出的基于改进SDT算法的变电站数据压缩存储算法流程如图3所示。
图3 基于改进SDT算法的变电站数据压缩存储方法流程
Fig.3 Substation data compression and storage method process based on improved SDT algorithm
04 算例分析
压缩比S越大,代表压缩节省的空间越多,压缩性能越好。相对压缩误差R越小,代表压缩精度越高,压缩性能越好。此外,压缩和解压缩时间代表了压缩、解压缩的速度。现代计算机硬件性能发展迅速,因此压缩算法对内存的占用一般不考虑。
4.2 算例分析结果
本文选用2021年6月某5G变电站SCADA系统采集存储的四遥数据作为算例数据,遥测采集时间间隔为1 min。遥测量主要包括:主变高压侧和低压侧、负荷线路、电容器参数,以及母线的三相电压等。
为验证本文提出的改进SDT压缩算法的准确性,本文选取原始SDT算法、原始SDT+自适应变频数据存储策略(简称策略1)、原始SDT+动态调整门限值策略(简称策略2)、原始SDT+异常点记录策略(简称策略3)作为对照组,对比不同算法的压缩效果。在计算相对压缩误差R时要对压缩数据进行解压,解压数据采用的是线性插值法,其不依赖于存储时间间隔和门限值,依赖的是一个压缩段内起点到终点的斜率,因此对一个存储序列而言,动态的存储时间间隔策略和门限值策略不影响数据恢复。相比原始SDT算法,本文算法能够在压缩比S和相对压缩误差R这2个指标上取得优势,则可以验证相关调整策略的有效性和合理性。
各算法的综合性能比较如表1所示。由表1可以看出:1)原始SDT+策略1、原始SDT+策略2、原始SDT+策略3的压缩比S明显优于原始SDT算法,验证了3种策略均可以有效提升压缩比,节省存储空间;2)本文改进SDT算法的压缩比S显著优于其他算法,验证了3种策略的组合效果在压缩比提升上优于单一策略;3)原始SDT+策略2、原始SDT+策略3算法的相对压缩误差R显著优于原始SDT算法,说明策略2、策略3可以有效减少压缩误差,原始SDT+策略1的相对压缩误差R比原始SDT算法大,可能是因为存储时间间隔减少,丢失了一部分原始数据,这部分数据通过线性插值的方法还原,牺牲了一定压缩精度,但极大地提升了压缩比;4)本文改进SDT算法的压缩比S和相对压缩误差R优于原始SDT算法,说明本文算法可以有效提高原始SDT算法的压缩精度和压缩比,验证了调整策略的有效性和合理性;5)3种单一改进策略均减少了每日数据平均压缩和解压缩时间,说明每种策略都可以提高算法的时间性能;6)本文改进SDT算法的时间性能优于单一改进策略的算法时间性能。综上所述,本文改进SDT算法通过引入3种策略,相比原始SDT算法,同时有效地提高了压缩比、压缩精度和算法的时间性能,验证了本文算法的有效性。
表1 各算法性能比较
Table 1 Comparison of algorithm performance
各算法对物理数据压缩性能的比较如表2所示,在表2中,S(P)、S(Q)、S(U)、S(I)分别为对有功功率、无功功率、电压、电流的压缩比,R(P)、R(Q)、R(U) 、R(I)分别为对有功功率、无功功率、电压、电流的相对压缩误差。各类数据的存储时间间隔和门限值E不同。由表2可知,各类别数据的算法性能结果相似,没有明显的差异,本文改进SDT算法在各类别数据的压缩性能均优于原始SDT算法,验证了本文模型的有效性和准确性。
表2 各算法对物理数据压缩性能的比较
Table 2 Comparison of physical data compression performance of various algorithms
05 结语
在5G等新型技术快速发展的背景下,变电站SCADA系统在未来可能会接入海量数据,其数据存储容量将呈现几何式增长。本文提出了一种基于改进SDT算法的变电站数据压缩存储方法,为解决此问题提供一种借鉴性思路。本文分别引入了自适应变频数据存储策略、动态调整门限值策略和异常点记录策略来提高SDT算法精度,算例表明本文所提方法相比原始SDT算法,可以有效提高算法压缩比、压缩精度和时间性能。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
为贯彻落实《国家标准化发展纲要》《关于加快经济社会发展全面绿色转型的意见》《加快构建碳排放双控制度体系工作方案》《关于加快推动制造业绿色化发展的指导意见》,深化工业和信息化绿色低碳标准化工作,健全完善绿色低碳标准体系,支撑工业和信息化绿色低碳转型升级,工业和信息化部近日印发《关于
高考志愿填报已经进入了最后冲刺阶段!选对方向和考高分同等重要,面对众多院校和海量专业,很多考生和家长还是一头雾水,将来想进电力企业,高考志愿应该填报哪些院校和专业?作为过来人,头条君精编填报干货,助你精准匹配理想院校!头条君首先向大家安利电气工程专业!电气专业“永不过时”国家大力
“AI的尽头是算力,算力的尽头是电力”已成行业流行语。近年来,在国家“东数西算”工程和AI大模型技术应用的双重驱动下,全国算力产业的用电需求呈现爆发式增长。随着以阿里和杭州六小龙等为代表的一批人工智能产业的不断升温,据统计,今年以来,浙江算力产业带来的用电增长已超过20%。算力“吃电”
北极星碳管家网获悉,近日,江苏盐城市人民政府印发《盐城市国家碳达峰试点建设推进方案》。方案指出,为推进国家碳达峰试点建设,盐城市将积极推动能耗双控向碳排放双控转变,探索构建碳排放统计核算体系,建立健全碳排放规划、碳数据监测、碳预算管理、碳综合评价和产品碳足迹等政策机制,实施重点产
最近《人民日报》通过专访任正非对外释放了重要信号。其中也讲到了,AI竞争的背后,是要有充足的电力、发达的信息网络,而中国有这样的优势。可以说,AI的尽头是算力,算力的尽头是电力,这已成为科技行业的共识。本期「电网深谈」邀请了阿里云能源行业首席架构师黄振、浙江省电力负荷管理中心孙钢、浙
编者按微电网作为分布式可再生能源发电领域内新兴的前沿技术,已成为一种安全可靠的集成分布式电源及负荷的小型电力系统。近年来,随着分布式电源大量接入,微电网系统惯量不断降低,特别是在孤岛微电网中,由于缺少大电网的支撑,在面对扰动时,系统抗扰能力和频率稳定性显著下降,因此需要调整自身控
日前,南京市人民政府办公厅印发《南京市工业领域经认定的经营者(AEO)制度试点实施方案》(宁政办规字〔2025〕4号),以“免申即享”+“告知承诺”的方式,在工业领域试点推行经认定的经营者(AEO)分级行政检查制度。经认定,共726家工业企业获工业领域AEO制度首批试点企业资格。本次试点企业范围包
2005年前后,SmartGrid概念出现,欧美的SmartGrid选择了配网智能化、微电网、分布式电源、虚拟电厂的路径。中国的SmartGrid更强调集中投资,集中管理,特高压+风光大基地。路径没有对错,中国和欧美选择了当时各自合适的发展路线。时过境迁,新型电力系统的挑战,不仅来自“双高”,也就是高比例可再生
6月24日,国家能源局山东监管办公室发布关于征求《山东省新能源和新型并网主体涉网安全能力提升工作方案》意见的函。方案指出,纳入涉网安全管理范围的新能源和新型并网主体(以下简称并网主体)包括并入电网的各类集中式风电、集中式光伏、分散式风电、分布式光伏、新型储能、虚拟电厂、分布式智能电
粤港澳大湾区公共算力服务平台正式启动、韶关数投华为联合创新实验室等一批科创平台上线或揭牌、涵盖AI应用等领域的30余个重磅项目签约落地……6月13日,第四届粤港澳大湾区(广东)算力产业大会暨第三届中国算力网大会在广东韶关隆重举行。作为全国十大算力集群之一,全国一体化算力网络粤港澳大湾区
北极星储能网获悉,6月24日,林洋能源在投资者互动平台上表示,截至目前,公司已使用自有资金通过集中竞价交易方式实施了三期回购股份方案,累计使用资金约5.6亿元,回购了82,870,581股股份。2024年3月21日,公司控股股东华虹电子基于对公司未来持续稳定发展的坚定信心及对公司长期投资价值的认可,发
“近期,雷雨天气频发,给电网安全稳定运行带来了新的考验。各部门一定要做好防范措施,加强设备巡视、值班管理,确保供电平稳。”7月2日,面对连续恶劣天气“大考”,国网迁西县供电公司明确“防汛优先、防雷并行,协同保障供电”工作思路,要求各部门强化设备巡检、值班管理,既要应对强降雨可能引发
7月1日,国华投资国能蒙东莫旗风电基地项目储能设备采购公开招标项目中标候选人公示,招标人为国华能源投资有限公司,项目单位为国华雁宝内蒙(莫力达瓦)新能源有限公司。国能蒙东莫旗风电基地项目规划装机容量为600MW,安装单机容量为6.7MW机组83台,6.25MW机组7台,共计90台风力发电机组。风电场同
近日,随着最后一米电缆沟验收合格并移交安装单位,国网山东省电力公司在乳山500千伏变电站新建工程中顺利完成从土建施工到电气安装“零交叉”转序,打造了土建施工、电气安装作业区域无重叠、无交叉的高效衔接管理模式,为同类工程建设积累了经验。乳山500千伏变电站是山东省“十四五”重点项目,承担
6月20日,山东电网官亭500千伏变电站主变扩建工程正式开工建设。官亭500千伏变电站位于山东省潍坊市所辖高密市境内,是潍坊东部地区的重要枢纽变电站,现有100万千伏安主变压器1组。本期扩建工程将新增100万千伏安主变压器1组,新建220千伏出线3回,在35千伏侧安装60兆乏低压并联电容器3组。扩建工程竣
国网上海市电力公司2025年第三次物资招标采购推荐的中标候选人公示及否决原因公示(招标编号:2505-GK006)
近日,南京高职园110千伏戴西变电站正式投入运营。该站融合光伏发电,将彻底解决园区长期存在的用电瓶颈问题。据悉,在项目投运前高职园仅依靠凤山变、双湖变、淳西变通过6条10千伏线路远距离供电,供电能力仅为30—40兆瓦,但随着园区发展预计2027年用电负荷将达115兆瓦。项目从开工到竣工历时4个月,
7月1日,融和元储蒙西电网首个电网侧独立新型储能电站#x2014;#x2014;阿左旗阿拉腾敖包变电站侧100MW/400MWh储能示范项目,正式并网投运。这一里程碑式工程的落地,标志着内蒙古西部地区在新型电力系统建设领域实现了重大突破,也为当地能源结构优化注入了强劲动力。在储能系统配置方面,该项目配置融和
北极星风力发电网获悉,6月30日,中国华能电子商务平台发布华能新疆公司托里公司塔城地区托里县50万千瓦风电项目、华能新疆公司托什干河分公司克州阿合奇县30万千瓦风电项目施工和设备打捆采购工程招标中标候选人公示的公告。华能新疆公司托里公司塔城地区托里县50万千瓦风电项目:公告显示,第一中标
6月20日,远景岱山储能电站示范项目在浙江舟山市并网投运。项目总投资3.2亿元,装机规模109.5MW/219MWh,是舟山市第二个并网的电网侧储能项目。该项目采用高安全性磷酸铁锂电池技术,在用电低谷期开启蓄能模式将富余电力转化为稳定储备,在高峰时段则释放电能缓解供电压力,实现电网削峰填谷。电站投运
6月30日,成都空港新城220千伏输变电工程投运,标志着国网成都供电公司建设的迎峰度夏重点工程全部建成投运,成都电网安全承载能力提升至2310万千瓦。待7月中旬检修计划执行完毕,成都电网将实现全元件运行,以最佳状态最大出力确保迎峰度夏和世运会保电期间平稳运行。2024年6月,成都电网安全承载能力
6月26日23时19分,随着最后一次冲击充电测试成功,冀北廊坊供电公司2025年重点工程——220千伏左堤双回线投运。自此,220千伏左奕变电站纳入廊坊城区环网体系,为城区环网开辟了新的输电通道,城区电网负荷稳定限值大幅提升。左堤双回线路全长15.07千米,穿越安次区、广阳区、开发区,连接220千伏左奕
为全面落实党的二十大关于“加快规划建设新型能源体系”的决策部署,深化产学研用协同创新,以“人工智能深化协同,能源科技求索创新”为主题的“2025国家能源互联网大会”于6月20日—21日召开。华为作为国家能源互联网产业及技术创新联盟(CEIA)理事单位及CEIA能源数字化专委会主任委员单位,于6月20
“‘十四五’期间,煤电供热板块累计亏损超千亿元。”炎炎夏日,会议室里却因讨论热电亏损的议题,而平添了几分寒意。“在‘双碳’目标下,热电正面临三重攻坚,一是煤电需从基础电源转向调峰电源的定位重构,二是多能互补系统中新能源消纳与供热稳定的平衡难题,三是数字化技术如何深度赋能传统机组智
7月1日,中国中煤于田县1500兆瓦光伏治沙项目(一期1000兆瓦)总承包公告发布,本工程按EPC工程模式实施,本次招标为一期1000兆瓦光伏发电项目(不含220kV升压汇集站及送出线路),直流侧总容量为1128.2872MWp,交流额定容量1000MWac。招标详情如下:中国中煤于田县1500兆瓦光伏治沙项目(一期1000兆瓦)
2025年6月30日12时18分,广东华电惠州东江燃机热电项目第二套机组一次性通过168小时满负荷试运行,各项性能指标均达到或超过设计标准,标志着两套机组全面建成,顺利转入商业运营阶段。本项目为华电电科院与粤能公司在广东地区联合合作的第四个调试项目,其中第二套机组调试和涉网试验部分由粤能公司承
在储能系统的高效运行过程中,设备间的信息传递是核心支撑。从电池状态的实时监测到系统充放电的精准控制,通信技术的选择直接影响储能系统的安全性、稳定性与智能化水平。本文将系统梳理储能领域常见的通讯方式,解析其技术特点与典型应用场景。RS485通信:低成本多节点的近距离连接RS485通信基于差分
北极星售电网获悉,6月29日,贵州省人民政府发布2025年贵州省重大工程和重点项目名单,其中包括修文县首融独立储能电站及虚拟电厂项目、贵安新区源网荷储一体化及多能互补建设项目等共3199个。详情如下:2025年贵州省重大工程和重点项目名单(共3199个)一、四化项目(2438个)(一)新型工业化(1429
近日,安徽亳州市发展和改革委员会、国网安徽省电力有限公司亳州供电公司发布关于印发2025年亳州电网迎峰度夏电力负荷管理方案的通知。2025年迎峰度夏期间,亳州电网预计最大负荷约340万千瓦,同比增长11.66%(2024迎峰度夏年最大304.5万千瓦)。亳州市大中型企业少,峰期居民负荷占比65%以上,可调控
6月26日,东莞市工业和信息化局发布《关于加快推动工业和信息化产业高质量发展的若干政策措施》政策解读。该政策措施现了东莞市在推动工业和信息化产业高质量发展过程中,对节能减碳工作的重视和支持,并通过财政奖励、资助等方式,鼓励企业积极开展绿色制造、数字化改造和技术创新,以实现产业的可持
日前,安阳市生态环境局印发《安阳市“无废城市”建设实施方案(2025—2027年)》(征求意见稿)。文件提出,到2027年底,安阳市“无废城市”制度、市场、技术、监管体系基本完善,主要指标达到省内先进水平,减污降碳协同增效作用初显;安阳市固体废物智慧监管信息平台上线运营,实现五大领域固体废物
6月19日,安顺市大数据发展管理局发布安顺市建设数字经济创新区2025年工作要点,文件指出,开展算电协同试点。深化算电协同,探索用电扶持,切实加强与省内电力企业对接,积极探索绿电直供有效途径,推动绿电上网和源网荷储就地消纳,帮助算力企业降低用电成本。原文如下:安顺市建设数字经济创新区202
大唐浙江分公司大唐金华天然气发电项目(2x741MW)基于全厂5G技术的智慧应用建设招标项目招标公告
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!