登录注册
请使用微信扫一扫
关注公众号完成登录
我要投稿
编者按
近年来,随着智能电网不断建设和发展,大规模广域数据实时采集和历史数据存储的需求快速增长。5G通信技术有望引领新一轮电力技术革命,其应用场景包括:万物互联、精准控制、海量量测、宽带通信和高效计算等。利用5G技术能够提供更完备的配电网差动保护方案,有利于智能电网的建设。5G技术为变电站接入更多用电设备和量测装置提供了通信层面的技术支撑,未来智能电网将接入更多量测点,海量历史数据存储将对硬件存储能力带来严峻考验。如何对数据进行压缩存储、提高数据存储性能成为必须考虑的问题之一。
《中国电力》2023年第6期刊发了于洋等人撰写的《基于改进旋转门算法的变电站数据压缩存储方法》一文。文章提出一种基于改进旋转门算法的变电站数据压缩存储方法,通过引入自适应变频数据存储策略、动态调整门限值策略和异常点记录策略提高算法精度,为5G等新型技术背景下变电站历史数据压缩存储提供一种新的思路。
摘要
为解决变电站数据采集与监视控制(supervisory control and data acquisition,SCADA)系统接入海量数据引发的数据存储问题,提出一种基于改进旋转门算法的变电站数据压缩存储方法。首先介绍了旋转门有损压缩算法,针对存储频率固定、门限值固定、忽视异常点等缺点,分别提出自适应变频数据存储策略、动态调整门限值策略和异常点记录策略以提高算法精度。其次,针对变电站SCADA系统遥信、遥控、遥调数据采用变位存储方法,遥测数据采用改进旋转门算法。最后,通过算例验证了所提方法的有效性。
01 SDT压缩算法
压缩技术分可通过某种编码方式保留数据中的关键点,降低数据的重复率。受到硬件存储容量限制,十分看重高压缩率特性,因此电力系统数据存储更适合采用有损压缩算法。
旋转门算法是一种线性拟合有损压缩算法,通过不断地构造平行四边形来选择保存的数据,只存储落在平行四边形之外的数据,不保存平行四边形之内的数据,其原理如图1所示。图1中a点是第1个压缩段的第1个数据点,在距离a点上下各为E(门限值)的坐标处有2个支点,从这2个支点穿过a点和b点构造平行四边形,该平行四边形包含a点和b点,这意味着a—b不是压缩段,这一段压缩尚未结束,继续依次考察a—c、a—d构成的平行四边形是否包含各点,发现2个支点穿过a点和d点构造的平行四边形不包含c点,则a—c是第一个压缩段,保存a点和c点,丢弃b点,第2个压缩段从d点开始,以此类推,直到遍历完所有数据点。
图1 SDT算法原理
Fig.1 Principles of the SDT algorithm
门限值E是SDT算法的唯一参数,其值的选取直接决定了压缩效果。当E值增大时,平行四边形面积增大,包含的数据点更多,这意味着丢弃的数据点更多,压缩比增大,但压缩误差也同步增大;当E值减小时,平行四边形面积减小,包含的数据点更少,这意味着丢弃的数据点变少,压缩比减小,但压缩误差也同步减小。实际应用时需要在压缩比和压缩误差之间综合权衡,找到合适的平衡点。
02 改进SDT算法
原始SDT算法计算简单方便,但也存在一些缺点,有改进空间:1)压缩周期内的所有数据点都要做平行四边形判断,即使一段时间内的数据值不变或变化很小,浪费了一定的压缩时间;2)决定压缩性能的门限值E一旦确定,在整个压缩过程中不能改变,导致可控性差;3)没有处理异常值,异常值会严重影响前后2个压缩段的性能。
鉴于此,本文针对上述3个缺点引入了3个策略,分别是自适应变频数据存储策略、动态调整门限值策略和异常点记录策略,以提高SDT算法的精度。
2.1 自适应变频数据存储策略
当前电力二次装置采集到数据上送SCADA系统通常有2种方式:周期上送和变化上送。周期上送是指每间隔一定时间,SCADA系统通过总召唤报文向装置下发数据召唤指令;变化上送是指装置检测到部分采集数据点的数据变化后,主动向SCADA系统发送数据帧。
根据SDT算法思想,本文引入了自适应变频数据存储策略,基于存储数据点的数值变化幅度动态地调整存储间隔时间,在一定时间内数据变化越平滑,存储间隔时间越大;数据变化越剧烈,存储间隔时间越小。
2.2 动态调整门限值策略
原始SDT算法只有唯一参数门限值E,E值的选取直接影响到SDT算法的压缩比和精度。SCADA系统存储数据种类很多,不同种类、不同时间的数据波动幅度偏差很大,很难找到一个固定的E值。因此,本文引入动态调整门限值策略,针对不同数据在不同时段,自适应地根据压缩误差适度调整门限值。
03 基于改进SDT算法的变电站5G数据压缩存储方法
变电站数据从装置采集、上送到SCADA系统接收、解析、存入实时库、历史库长期存储的信息流如图2所示。首先,变电站内各个装置通过电流互感器、电压互感器等各类传感器采集数据,以数据报文的方式传输给SCADA系统前置模块,这些数据主要是遥信、遥测、遥调、遥控等,也被称为“四遥”;其次,前置模块接收到数据报文后进行解析,通过基于消息总线的消息机制向实时库应用程序分门别类地发送数据信息,实时库区分存放“四遥”数据,站内监控画面上动态展示的数据源通常为实时库数据;最后,实时库应用程序向历史存储应用程序通过消息机制推送数据。本文提出的基于改进SDT算法的变电站数据压缩存储方法正是适用于最后一个历史库长期存储环节,在长期数据存储时提高压缩比,节省存储空间。
图2 变电站数据信息流
Fig.2 Substation data flow
当前变电站长期存储数据是“四遥”数据,通常按固定时间长度来保存,在数据读取时实时性要求也不高。本文结合“四遥”数据的特点,提出一种新的存储方法,将其分2类做区别处理。
1)遥信、遥控、遥调。其中遥信、遥控是状态量,只有有限的数值选项。相当数量的一部分遥信信号稳定,可能很长时间不变位;遥控指令不具有周期采样特征,只有在触发遥控时才会有遥控信号;遥调虽然是模拟量,但是和遥控类似,只有在触发遥调时才会有遥调信号。以上3类可以采用变位存储的策略,仅存储变位数据点的值和时间。
2)遥测。遥测属于模拟量,其中一些数据(如母线电压)波动小、历史曲线平稳,按固定长度存储将造成空间浪费,另一些数据(如线路有功功率)波动大,存储更多的数据点十分有必要。因此针对遥测,采用本文提出的改进SDT算法,区分不同性质的测点,利用算法自适应地分别调整各时间序列的存储时间间隔和门限值E,将电压、电流、功率区分开,针对每一个测点对应的历史时间序列(数据曲线)做存储。
本文提出的基于改进SDT算法的变电站数据压缩存储算法流程如图3所示。
图3 基于改进SDT算法的变电站数据压缩存储方法流程
Fig.3 Substation data compression and storage method process based on improved SDT algorithm
04 算例分析
压缩比S越大,代表压缩节省的空间越多,压缩性能越好。相对压缩误差R越小,代表压缩精度越高,压缩性能越好。此外,压缩和解压缩时间代表了压缩、解压缩的速度。现代计算机硬件性能发展迅速,因此压缩算法对内存的占用一般不考虑。
4.2 算例分析结果
本文选用2021年6月某5G变电站SCADA系统采集存储的四遥数据作为算例数据,遥测采集时间间隔为1 min。遥测量主要包括:主变高压侧和低压侧、负荷线路、电容器参数,以及母线的三相电压等。
为验证本文提出的改进SDT压缩算法的准确性,本文选取原始SDT算法、原始SDT+自适应变频数据存储策略(简称策略1)、原始SDT+动态调整门限值策略(简称策略2)、原始SDT+异常点记录策略(简称策略3)作为对照组,对比不同算法的压缩效果。在计算相对压缩误差R时要对压缩数据进行解压,解压数据采用的是线性插值法,其不依赖于存储时间间隔和门限值,依赖的是一个压缩段内起点到终点的斜率,因此对一个存储序列而言,动态的存储时间间隔策略和门限值策略不影响数据恢复。相比原始SDT算法,本文算法能够在压缩比S和相对压缩误差R这2个指标上取得优势,则可以验证相关调整策略的有效性和合理性。
各算法的综合性能比较如表1所示。由表1可以看出:1)原始SDT+策略1、原始SDT+策略2、原始SDT+策略3的压缩比S明显优于原始SDT算法,验证了3种策略均可以有效提升压缩比,节省存储空间;2)本文改进SDT算法的压缩比S显著优于其他算法,验证了3种策略的组合效果在压缩比提升上优于单一策略;3)原始SDT+策略2、原始SDT+策略3算法的相对压缩误差R显著优于原始SDT算法,说明策略2、策略3可以有效减少压缩误差,原始SDT+策略1的相对压缩误差R比原始SDT算法大,可能是因为存储时间间隔减少,丢失了一部分原始数据,这部分数据通过线性插值的方法还原,牺牲了一定压缩精度,但极大地提升了压缩比;4)本文改进SDT算法的压缩比S和相对压缩误差R优于原始SDT算法,说明本文算法可以有效提高原始SDT算法的压缩精度和压缩比,验证了调整策略的有效性和合理性;5)3种单一改进策略均减少了每日数据平均压缩和解压缩时间,说明每种策略都可以提高算法的时间性能;6)本文改进SDT算法的时间性能优于单一改进策略的算法时间性能。综上所述,本文改进SDT算法通过引入3种策略,相比原始SDT算法,同时有效地提高了压缩比、压缩精度和算法的时间性能,验证了本文算法的有效性。
表1 各算法性能比较
Table 1 Comparison of algorithm performance
各算法对物理数据压缩性能的比较如表2所示,在表2中,S(P)、S(Q)、S(U)、S(I)分别为对有功功率、无功功率、电压、电流的压缩比,R(P)、R(Q)、R(U) 、R(I)分别为对有功功率、无功功率、电压、电流的相对压缩误差。各类数据的存储时间间隔和门限值E不同。由表2可知,各类别数据的算法性能结果相似,没有明显的差异,本文改进SDT算法在各类别数据的压缩性能均优于原始SDT算法,验证了本文模型的有效性和准确性。
表2 各算法对物理数据压缩性能的比较
Table 2 Comparison of physical data compression performance of various algorithms
05 结语
在5G等新型技术快速发展的背景下,变电站SCADA系统在未来可能会接入海量数据,其数据存储容量将呈现几何式增长。本文提出了一种基于改进SDT算法的变电站数据压缩存储方法,为解决此问题提供一种借鉴性思路。本文分别引入了自适应变频数据存储策略、动态调整门限值策略和异常点记录策略来提高SDT算法精度,算例表明本文所提方法相比原始SDT算法,可以有效提高算法压缩比、压缩精度和时间性能。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
日前,国际电工委员会(IEC)正式发布关于智能传感技术的白皮书《未来电网智能传感技术》。该白皮书由我国专家牵头,深入探讨了数字电网的发展趋势和技术路线,构建了未来数字电网传感技术的国际标准框架,涵盖发电、输电、变电、配电、用电、碳排放以及一二次设备融合等多个关键领域,为微型智能传感
7月23日,国家能源局发布智能电网国家科技重大专项2024年度公开项目申报指南,其中提到,根据智能电网国家科技重大专项实施方案的部署,现将2024年度公开项目申报指南予以公布,拟安排中央财政资金约5.6亿元(战略前沿技术类0.2亿元、重大技术装备类3.6亿元、重大示范验证类1.8亿元)。其中还提到,申
北极星输配电网获悉,近日500千伏贵阳变电站增容改造第一阶段全面完成。据悉,500千伏贵阳变电站于1992年8月建成,是我国西南地区第一座500千伏变电站,也是贵州电网500千伏枢纽站之一,供电范围为贵阳城区,所供的220千伏鸡场站、曹官站、嵩科站、万松站、乌当站均为城区重要变电站。贵州电网公司把50
最近,盐城供电信通分公司组织工作人员前往双草变、盐都变、佳湖变以及光缆开断工作现场,积极配合施工单位,顺利完成220千伏都红4623线24芯OPGW光缆开断及其与新放72芯OPGW光缆熔接工作。随着光纤数字通信的快速发展,光纤传输具有容量大、抗干扰能力强等突出优点,现在已得到了各行各业信息通信行业
北极星输配电网获悉,近日,国际电工委员会(IEC)正式发布关于智能传感技术的白皮书《未来电网智能传感技术》。据了解,该白皮书由我国牵头,对数字电网的发展趋势和技术路线进行深入探讨,构建了未来数字电网传感技术的国际标准框架,涵盖发电、输电、变电、配电、用电、碳排放以及一二次设备融合等
7月1日,恒华科技成功入选第三批“北京市通用人工智能产业创新伙伴计划”成员名单。“北京市通用人工智能产业创新伙伴计划”是北京市经济和信息化局联合北京市科学技术委员会中关村管委会、北京市发展和改革委员会共同启动,聚焦“高质量数据供给、高性能算力提供、高价值模型应用”,对算力、数据、模
7月3日,浙江乐清市发展和改革局对黄美特等代表提出的《关于加快推动新型能源体系建设的建议》做出答复,其中提到,重点发展智能电力控制、输配电等产业装备,推进电力运行控制、并网、功率预测、储能装置集成等系统开发。对标德国中部太阳谷、江苏南京等地,抓住建设智能电网和泛在电力物联网发展机遇
6月24日8时20分,山东莱芜供电公司电网调度运行辅助研判应用系统弹窗告警显示莱钢专线110千伏棋冯Ⅰ线跳闸,同时推送故障信号、线路参数及定值情况等故障相关信息,辅助调控人员开展线路强送研判。近年来,随着储能电站、分布式新能源场站大量并网,电网面临着新能源占比高、运行特性复杂等挑战,传统
日前,恒华科技与子公司道亨软件受邀参加2024空间智能软件技术大会,并在展览展示区重点展示了以“BIM+GIS”为核心的智能电网、智慧水利行业解决方案,吸引了众多与会领导、合伙伙伴和行业客户的关注。输变电及新能源智慧设计解决方案智慧设计软件包括三维线路设计、三维电缆设计、三维变电设计、三维
今日,国科管系统发布关于“储能与智能电网技术”、“氢能技术”、“煤炭清洁高效利用技术”、“可再生能源技术”4个重点专项2024年度项目申报指南征求意见的通知,请登录系统,在“公开公示-指南征求意见”菜单栏中查看指南征求意见材料。
6月28日,国家能源局综合司关于公开征求2024年能源领域拟立项行业标准制修订计划及外文版翻译计划项目意见。在2024年拟立项行业标准制定计划中,包括虚拟电厂资源接入技术规范、微电网经济评价导则、分布式光伏发电系统设计规范、电力系统电力电量平衡及调峰分析与生产模拟技术规范、公用配电网电能质
7月23-24日,国网天津经研院设计中心(勘测设计公司)变电(土建)室围绕近期变电站建设重难点技术问题与兄弟设计院、设备厂家开展技术交流。随着国家“双碳”目标的提出,新型电力系统建设的不断推进,对变电站建设也提出新的要求,需要变电站建设时考虑增设感性无功补偿装置、提升绿色建造水平、提升
盛夏时节,一架测试用多旋翼无人机从安徽芜湖南陵县的220千伏后港变电站内固定机巢起飞升空,沿着预设航线,在空中盘旋、飞行,不到20分钟,就高效完成了全站巡视任务,确保了迎峰度夏期间变电站设备正常运行。“迎峰度夏期间,我们随时都要对变电站开展例行巡视和红外测温巡视。”正在安装智能摄像头
近日,中国能建广西院牵头总承包的220千伏平果配套线路工程(220千伏果化变电站)、220千伏小梅输变电工程(江凤—果化220千伏双回线路工程)投运送电。220千伏果化变电站位于广西平果市果化镇,本期新建2台240兆伏安主变压器,220千伏出线6回。江凤—果化220千伏双回线路工程位于广西百色市百东新区,
“正在建设的川渝1000千伏特高压交流输电工程,是我国海拔最高的交流特高压工程。在工期紧张、气候条件差、高原反应严重和试验难度大的重重压力下,工作人员在高温下向着‘一次试验合格、一次带电成功、长期安全稳定运行’目标全力冲刺。”7月8日至10日,一场别开生面的党员实践活动——平高集团客服中
6月28日,220千伏鱼凫变电站扩建工程成功投运。该工程是国网四川成都供电公司启动“蓉耀工程·贡嘎登峰”专项行动以来,工期最短的220千伏变电站扩建工程,前后耗时仅3个月。工程投运后,将温江片区供电能力提升28.6%,成都电网安全承载能力突破2040万千瓦,为成都电网迎峰度夏提供坚强保障。鱼凫变电
7月25日,广州供电局2024年第6批专项主网一次设备物资公开招标,其中包括35kV干式空心并联电抗器、10kV干式铁心并联电抗器、变电站智能网关、轨道车。标包金额共2197.164万元。详情如下:广州供电局2024年第6批专项主网一次设备(10kV干式铁心并联电抗器等)物资公开招标招标公告(项目编号:CG2700022
7月18日,新疆塔额750千伏输变电工程环评二次公示。一、建设项目基本情况项目名称:塔额750千伏输变电工程建设性质:新建建设地点:克拉玛依市克拉玛依区、塔城地区额敏县和托里县建设内容:①新建1座塔额750kV变电站,设置2台1500MVA主变,750kV出线2回,220kV出线10回,1×300Mvar高压电抗器,2×(1
7月23日,随着银川公司员工远程指挥无人机、智能机器人、固定摄像机对220千伏芦花变电站开展立体智能特巡完成,标志着宁夏首个220千伏变电站“智能立体巡检系统”在银川市启用,银川电网智能运维迈向新阶段。大暑过后,银川郊外热力十足。在220千伏芦花变电站内,无人机机巢自动打开,一架无人机平稳升
7月24日,甘肃兰州上川330千伏变电站第三台主变扩建工程环评公示。川330千伏变电站位于甘肃省兰州市城关区盐场路街道上川村,上川第三台主变的扩建,可以提高现有负荷供电可靠性,提升主变N-1故障情况应对风险能力。因此,国网甘肃省电力公司兰州供电公司拟建设甘肃兰州上川330千伏变电站第三台主变扩
近日,江西南昌梦山500千伏变电站主变增容工程环评公示。本工程建设地点为江西省南昌市新建区石埠镇乌城村,南昌梦山500千伏变电站主变增容工程具体建设规模如下:本工程拟在梦山变电站将现状2x750MVA主变增容至2x1000MVA主变,不新增出线及无功补偿装置。其中提到,梦山变电站位于南昌市电网枢纽,接带
7月24日11时,国网福建省电力有限公司发布台风二级、暴雨三级预警,全面落实防抗今年第3号台风“格美”各项措施。目前,国网福建电力共集结抢修队伍659支、抢修人员9771人,随时做好供电保障准备。国网福建电力应用“137”防汛抗台风保供电应急模式,落实各项防台风、暴雨应急准备措施。全面组织电网设
7月17日,沈阳市制造业数字化转型公共服务平台建设项目招标。最高限价4052250元。详情如下:(沈阳市制造业数字化转型公共服务平台建设项目)招标公告项目概况沈阳市制造业数字化转型公共服务平台建设项目招标项目的潜在供应商应在线上获取招标文件,并于2024年08月07日09时30分(北京时间)前递交投标
日前,安徽电力信通公司和铜陵供电公司在10千伏纺织线的一台环网柜上安装“5G+量子”配电网自动化终端系统。该系统的上线可提升线路的故障自愈能力和供电质量。据了解,5G技术具有高速率、低延时、大容量等优势,能够实现海量数据的快速传输和实时处理。量子技术则以其独特的加密特性,为电力通信安全
北极星售电网获悉,四川省遂宁市经济和信息化局近日公布了关于市政协八届四次会议第91号提案办理答复的函,其中提到,以推动“满格遂宁”建设工作为抓手,由市通信发展办公室、市经济和信息化局、市文化广电旅游局牵头,会同市直有关部门建立“满格遂宁”工作领导小组,形成跨部门、跨领域工作协调机制
7月1日,江西电网首个5G轻量化(5GRedCap)技术电力应用范例在赣州供电公司落地应用,提升了该公司电网智能化水平和运营效率。在江西省2024世界电信和信息社会日主题活动上,该范例被列选为活动典型示范项目。赣州供电公司结合供区内配电网通信亟须提升覆盖率与可靠性的生产实际需求,开展了5G技术配电
7月9日,在安徽省滁州市南谯区500千伏变电站,滁州供电公司启用“智能机器人+巡检人员复核”作业模式,对站内供电设备开展特殊巡检。针对新一轮高温、雷雨天气,该公司在常规人工巡检的基础上,增设5G智能巡检机器人对全市供电设施进行全方位巡检,发现隐患及时整改消除,保障电网设备安全运行。1台5G
近日,宁夏银川7处配电自动化终端近日通过5G轻量化(RedCap)通信模块接入电力虚拟专网,实现非光纤覆盖区域配电自动化遥控功能的应用。本次试点在宁夏电网率先实现5GRedCap技术承载电网控制类业务,初步完成国家电力调度控制中心配电通信网工作专班第一批试点任务。据悉,国网银川供电公司已完成全部4
北极星电力软件网获悉,近日,重庆市组织开展了2024年重庆市数字化车间和智能工厂认定工作和2024年工业互联网新模式示范项目申报工作。经企业自愿申报、区县经信主管部门初审、专家评审等程序,拟认定重庆美利信科技股份有限公司5G通信及新能源汽车精密压铸结构件生产智能工厂等39个项目为2024年重庆市
7月4日,上海徐汇区印发《2024年徐汇区“五大战区”招商引资工作方案》(徐府办发〔2024〕6号),其中提到,聚焦人工智能、5G、大数据、自动驾驶、区块链、元宇宙等领域,结合政务和社会场景需求,实施揭榜赛马,组织开展场景路演、场景对接等活动,吸引相关领域的龙头企业参与场景建设,加快先进适用
7月3日,中华人民共和国和哈萨克斯坦共和国联合声明发布,其中提到,双方采取措施共同在哈实施绿色能源项目,包括运用高新技术建设发电站,对电网进行升级改造。同时指出,双方愿推动开展工业和信息化领域合作,分享发展经验,加强在信息技术、中小企业、5G、通信、数据存储和分析、能源电子、人才培养
北极星电力软件网获悉,6月24日,常州数据集团有限公司正式揭牌,注册资本5亿元,由常州产投集团保障运营。股东由常州市政府、常州产业投资集团、常州投资集团、常州地铁集团、常州市城市建设集团、常州新能源集团、常州交通产业集团、常州市晋陵投资集团有限公司构成。首期控股子公司包括常州数据科技
6月26日,山东省印发山东省中小企业数字化转型水平评测指南(鲁工信服〔2024〕129号),其中提到三级指标评定标准,在最高级别中提到根据自身需要,搭建物联网平台,对产品运行提供智能化售后服务;使用5G等高端网络技术,实现高速实时数据采集和传输;每年有不低于100万元的预算,用于人员以外的数字
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!