登录注册
请使用微信扫一扫
关注公众号完成登录
摘要
为解决变电站数据采集与监视控制(supervisory control and data acquisition,SCADA)系统接入海量数据引发的数据存储问题,提出一种基于改进旋转门算法的变电站数据压缩存储方法。首先介绍了旋转门有损压缩算法,针对存储频率固定、门限值固定、忽视异常点等缺点,分别提出自适应变频数据存储策略、动态调整门限值策略和异常点记录策略以提高算法精度。其次,针对变电站SCADA系统遥信、遥控、遥调数据采用变位存储方法,遥测数据采用改进旋转门算法。最后,通过算例验证了所提方法的有效性。
01 SDT压缩算法
压缩技术分可通过某种编码方式保留数据中的关键点,降低数据的重复率。受到硬件存储容量限制,十分看重高压缩率特性,因此电力系统数据存储更适合采用有损压缩算法。
旋转门算法是一种线性拟合有损压缩算法,通过不断地构造平行四边形来选择保存的数据,只存储落在平行四边形之外的数据,不保存平行四边形之内的数据,其原理如图1所示。图1中a点是第1个压缩段的第1个数据点,在距离a点上下各为E(门限值)的坐标处有2个支点,从这2个支点穿过a点和b点构造平行四边形,该平行四边形包含a点和b点,这意味着a—b不是压缩段,这一段压缩尚未结束,继续依次考察a—c、a—d构成的平行四边形是否包含各点,发现2个支点穿过a点和d点构造的平行四边形不包含c点,则a—c是第一个压缩段,保存a点和c点,丢弃b点,第2个压缩段从d点开始,以此类推,直到遍历完所有数据点。
图1 SDT算法原理
Fig.1 Principles of the SDT algorithm
门限值E是SDT算法的唯一参数,其值的选取直接决定了压缩效果。当E值增大时,平行四边形面积增大,包含的数据点更多,这意味着丢弃的数据点更多,压缩比增大,但压缩误差也同步增大;当E值减小时,平行四边形面积减小,包含的数据点更少,这意味着丢弃的数据点变少,压缩比减小,但压缩误差也同步减小。实际应用时需要在压缩比和压缩误差之间综合权衡,找到合适的平衡点。
02 改进SDT算法
原始SDT算法计算简单方便,但也存在一些缺点,有改进空间:1)压缩周期内的所有数据点都要做平行四边形判断,即使一段时间内的数据值不变或变化很小,浪费了一定的压缩时间;2)决定压缩性能的门限值E一旦确定,在整个压缩过程中不能改变,导致可控性差;3)没有处理异常值,异常值会严重影响前后2个压缩段的性能。
鉴于此,本文针对上述3个缺点引入了3个策略,分别是自适应变频数据存储策略、动态调整门限值策略和异常点记录策略,以提高SDT算法的精度。
2.1 自适应变频数据存储策略
当前电力二次装置采集到数据上送SCADA系统通常有2种方式:周期上送和变化上送。周期上送是指每间隔一定时间,SCADA系统通过总召唤报文向装置下发数据召唤指令;变化上送是指装置检测到部分采集数据点的数据变化后,主动向SCADA系统发送数据帧。
根据SDT算法思想,本文引入了自适应变频数据存储策略,基于存储数据点的数值变化幅度动态地调整存储间隔时间,在一定时间内数据变化越平滑,存储间隔时间越大;数据变化越剧烈,存储间隔时间越小。
2.2 动态调整门限值策略
原始SDT算法只有唯一参数门限值E,E值的选取直接影响到SDT算法的压缩比和精度。SCADA系统存储数据种类很多,不同种类、不同时间的数据波动幅度偏差很大,很难找到一个固定的E值。因此,本文引入动态调整门限值策略,针对不同数据在不同时段,自适应地根据压缩误差适度调整门限值。
03 基于改进SDT算法的变电站5G数据压缩存储方法
变电站数据从装置采集、上送到SCADA系统接收、解析、存入实时库、历史库长期存储的信息流如图2所示。首先,变电站内各个装置通过电流互感器、电压互感器等各类传感器采集数据,以数据报文的方式传输给SCADA系统前置模块,这些数据主要是遥信、遥测、遥调、遥控等,也被称为“四遥”;其次,前置模块接收到数据报文后进行解析,通过基于消息总线的消息机制向实时库应用程序分门别类地发送数据信息,实时库区分存放“四遥”数据,站内监控画面上动态展示的数据源通常为实时库数据;最后,实时库应用程序向历史存储应用程序通过消息机制推送数据。本文提出的基于改进SDT算法的变电站数据压缩存储方法正是适用于最后一个历史库长期存储环节,在长期数据存储时提高压缩比,节省存储空间。
图2 变电站数据信息流
Fig.2 Substation data flow
当前变电站长期存储数据是“四遥”数据,通常按固定时间长度来保存,在数据读取时实时性要求也不高。本文结合“四遥”数据的特点,提出一种新的存储方法,将其分2类做区别处理。
1)遥信、遥控、遥调。其中遥信、遥控是状态量,只有有限的数值选项。相当数量的一部分遥信信号稳定,可能很长时间不变位;遥控指令不具有周期采样特征,只有在触发遥控时才会有遥控信号;遥调虽然是模拟量,但是和遥控类似,只有在触发遥调时才会有遥调信号。以上3类可以采用变位存储的策略,仅存储变位数据点的值和时间。
2)遥测。遥测属于模拟量,其中一些数据(如母线电压)波动小、历史曲线平稳,按固定长度存储将造成空间浪费,另一些数据(如线路有功功率)波动大,存储更多的数据点十分有必要。因此针对遥测,采用本文提出的改进SDT算法,区分不同性质的测点,利用算法自适应地分别调整各时间序列的存储时间间隔和门限值E,将电压、电流、功率区分开,针对每一个测点对应的历史时间序列(数据曲线)做存储。
本文提出的基于改进SDT算法的变电站数据压缩存储算法流程如图3所示。
图3 基于改进SDT算法的变电站数据压缩存储方法流程
Fig.3 Substation data compression and storage method process based on improved SDT algorithm
04 算例分析
压缩比S越大,代表压缩节省的空间越多,压缩性能越好。相对压缩误差R越小,代表压缩精度越高,压缩性能越好。此外,压缩和解压缩时间代表了压缩、解压缩的速度。现代计算机硬件性能发展迅速,因此压缩算法对内存的占用一般不考虑。
4.2 算例分析结果
本文选用2021年6月某5G变电站SCADA系统采集存储的四遥数据作为算例数据,遥测采集时间间隔为1 min。遥测量主要包括:主变高压侧和低压侧、负荷线路、电容器参数,以及母线的三相电压等。
为验证本文提出的改进SDT压缩算法的准确性,本文选取原始SDT算法、原始SDT+自适应变频数据存储策略(简称策略1)、原始SDT+动态调整门限值策略(简称策略2)、原始SDT+异常点记录策略(简称策略3)作为对照组,对比不同算法的压缩效果。在计算相对压缩误差R时要对压缩数据进行解压,解压数据采用的是线性插值法,其不依赖于存储时间间隔和门限值,依赖的是一个压缩段内起点到终点的斜率,因此对一个存储序列而言,动态的存储时间间隔策略和门限值策略不影响数据恢复。相比原始SDT算法,本文算法能够在压缩比S和相对压缩误差R这2个指标上取得优势,则可以验证相关调整策略的有效性和合理性。
各算法的综合性能比较如表1所示。由表1可以看出:1)原始SDT+策略1、原始SDT+策略2、原始SDT+策略3的压缩比S明显优于原始SDT算法,验证了3种策略均可以有效提升压缩比,节省存储空间;2)本文改进SDT算法的压缩比S显著优于其他算法,验证了3种策略的组合效果在压缩比提升上优于单一策略;3)原始SDT+策略2、原始SDT+策略3算法的相对压缩误差R显著优于原始SDT算法,说明策略2、策略3可以有效减少压缩误差,原始SDT+策略1的相对压缩误差R比原始SDT算法大,可能是因为存储时间间隔减少,丢失了一部分原始数据,这部分数据通过线性插值的方法还原,牺牲了一定压缩精度,但极大地提升了压缩比;4)本文改进SDT算法的压缩比S和相对压缩误差R优于原始SDT算法,说明本文算法可以有效提高原始SDT算法的压缩精度和压缩比,验证了调整策略的有效性和合理性;5)3种单一改进策略均减少了每日数据平均压缩和解压缩时间,说明每种策略都可以提高算法的时间性能;6)本文改进SDT算法的时间性能优于单一改进策略的算法时间性能。综上所述,本文改进SDT算法通过引入3种策略,相比原始SDT算法,同时有效地提高了压缩比、压缩精度和算法的时间性能,验证了本文算法的有效性。
表1 各算法性能比较
Table 1 Comparison of algorithm performance
各算法对物理数据压缩性能的比较如表2所示,在表2中,S(P)、S(Q)、S(U)、S(I)分别为对有功功率、无功功率、电压、电流的压缩比,R(P)、R(Q)、R(U) 、R(I)分别为对有功功率、无功功率、电压、电流的相对压缩误差。各类数据的存储时间间隔和门限值E不同。由表2可知,各类别数据的算法性能结果相似,没有明显的差异,本文改进SDT算法在各类别数据的压缩性能均优于原始SDT算法,验证了本文模型的有效性和准确性。
表2 各算法对物理数据压缩性能的比较
Table 2 Comparison of physical data compression performance of various algorithms
05 结语
在5G等新型技术快速发展的背景下,变电站SCADA系统在未来可能会接入海量数据,其数据存储容量将呈现几何式增长。本文提出了一种基于改进SDT算法的变电站数据压缩存储方法,为解决此问题提供一种借鉴性思路。本文分别引入了自适应变频数据存储策略、动态调整门限值策略和异常点记录策略来提高SDT算法精度,算例表明本文所提方法相比原始SDT算法,可以有效提高算法压缩比、压缩精度和时间性能。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
4月29日-30日,第八届数字中国建设峰会在福建福州举办。在国家“双碳”战略持续推动的背景下,城市绿色高质量发展成为社会广泛关注的重要议题。4月30日,以“共建绿色城市新生态”为主题的城市绿色高质量发展峰会在福州市海峡国际会展中心5号馆成功举办。本次峰会聚焦“源网荷储一体化”建设路径等重点
随着国家“双碳”战略目标深入推进,新能源占比持续攀高。截至3月底,浙江光伏装机突破5000万千瓦,同比增长41%,占电源总装机近三分之一。这为绿色发展提供了基础,也让电网调度运行面临新压力。国网浙江电力调控中心值长詹文达介绍,海量新能源接入主要带来三大难题:一是“用不完”,尤其是节假日期
2025年4月29,北非能源行业盛会#x2014;#x2014;Solaramp;StorageLiveEgypt2025将在开罗国际展览中心重磅启幕!作为埃及实现2030年42%可再生能源目标的助推剂,这场展会不仅是技术展示的舞台,也是政策、资本与产业力量的碰撞场。从全球能源头部企业到中东光伏新贵,多家参展企业将在此呈现光伏、储能、
4月29日,国电南瑞发布2025年第一季度报告。报告期内,实现营业收入88.95亿元,同比增长14.76%;归属于上市公司股东的净利润6.80亿元,同比增长14.14%;归属于上市公司股东的扣除非经常性损益的净利润6.09亿元,同比增长11.14%。
4月29日,国电南瑞发布2024年年报。公司全年实现营业收入574.17亿元,较上年同期增长11.15%,实现归属于上市公司股东的净利润76.10亿元,较上年同期增长6.06%,基本每股收益0.95元。报告提到,报告期内抢抓特高压、抽水蓄能发展机遇,中标甘肃-浙江等特高压、辽宁大雅河等抽水蓄能工程。新一代调控中标
一图读懂正泰电器2024年度可持续发展报告
正泰电器发布2025年一季报&2024年度报告
广东电网公司数据显示,今年第一季度,广东省全社会用电量1870.66亿千瓦时,同比增长2.99%。其中:广东“三新”行业用电量同比增长32.9%,新质生产力带动作用持续显现。每10台有4台“广东造”典型工业机器人制造企业用电量同比增长近10%据广东省工业和信息化厅统计,2024年,广东省工业机器人产量占全
近日,南方电网公司制定安全生产治本攻坚三年行动2025年重点任务。2024年,公司深入贯彻落实习近平总书记关于安全生产重要指示精神,落实国务院安委会印发《安全生产治本攻坚三年行动方案(2024—2026年)》,全面启动、系统部署公司安全生产治本攻坚三年行动,深入开展主要负责人安全教育培训、事故隐患
4月14日,湖北武汉市新增1家企业签订武汉市虚拟电厂精准响应意向协议。截至目前,该虚拟电厂累计签约8家企业,包括华润、华能、中广核、特来电、蔚来等知名企业,最大可提供67.2万千瓦的负荷调节能力。此前,为提前备战2025年武汉市迎峰度夏电力保供,最大化挖掘武汉分布式电源、储能等负荷潜力,国网
4月25日,国电南自发布2025年一季度报。报告期内,公司实现营收18.54亿元,同比增长50.79%。归属于上市公司股东的净利润2980.36万元,归属于上市公司股东的扣除非经常性损益的净利润2848.63万元。
据北极星氢能网不完全统计,4月共计16个氢能项目传来消息,涉及氢能制储输用多个领域,详情如下:签约4月,甘泉堡经济技术开发区(工业区)与江苏富仕宝新能源科技有限公司签订投资协议,建设绿氢智慧能源一体化示范项目。项目建成后,可实现年产15万吨绿氢、60万吨绿色甲醇和40万吨绿氨项目。据了解,
当地时间4月28日中午,位于欧洲伊比利亚半岛的西班牙和葡萄牙突发大范围停电,导致交通瘫痪、通信中断、公共服务陷入混乱,波及逾5000万民众。(来源:东亚能源产业观察nbsp;作者:天津景钰信息咨询)受此影响,西班牙全境约116列火车停运,马德里等多地地铁关闭,医院启动应急供电设备,马德里网球大
4月30日,四川省甘孜州巴塘水电站500千伏送出工程、成都金融城220千伏输变电工程正式投运,标志着四川电网(2025年)2项迎峰度夏重点工程顺利建成。“十四五”以来,随着成渝地区双城经济圈建设加快推进,社会用电需求持续提升,预计2025年夏季,四川最大用电负荷需求将突破7000万千瓦。为此,国网四川省
为深入贯彻落实国家能源局工作部署要求,推动“十四五”能源规划目标落实和重大能源工程项目建设,4月28日,江苏能源监管办赴镇江开展重大能源工程项目建设和电网规划发展情况调研。期间,调研组一行深入江苏句容抽水蓄能电站项目、镇江上党500千伏变电站工程项目等现场,实地查看相关项目建设进展,在
国网青海电力2025年第一次物资竞争性谈判采购推荐的成交候选人公示(招标编号:282518)
海南电网有限责任公司2025年第四批物资类专项单一来源采购项目单一来源公示(采购编号:CG0700062002040051)1.采购条件本采购项目海南电网有限责任公司2025年第四批物资类专项单一来源采购项目,采购人为海南电网有限责任公司,项目资金已落实。该项目已具备采购条件,现对该项目进行单一来源采购。2.
4月29日,国电南瑞发布2024年年报。公司全年实现营业收入574.17亿元,较上年同期增长11.15%,实现归属于上市公司股东的净利润76.10亿元,较上年同期增长6.06%,基本每股收益0.95元。报告提到,报告期内抢抓特高压、抽水蓄能发展机遇,中标甘肃-浙江等特高压、辽宁大雅河等抽水蓄能工程。新一代调控中标
4月25日,四川成渝中线资阳永清牵引站220千伏外部供电工程核准获批。一、依据年度电网项目核准计划,为满足成渝中线资阳永清牵引站用电需求,同意建设成渝中线资阳永清牵引站220千伏外部供电工程。项目单位为国网四川省电力公司。二、项目建设地点为资阳市安岳县。三、项目建设主要内容(一)扩建广惠2
广西电网有限责任公司电网建设分公司500千伏龙潭(玉林三)220千伏配套工程包括龙潭站π接220千伏凯捷~民丰线路π接段线路工程、龙潭站π接220千伏还珠~民丰线路π接段线路工程和龙潭站π接220千伏客家~凯捷线路π接段线路工程。项目建设地点位于广西壮族自治区玉林市博白县、北海市合浦县境内,建
4月21日,湖南岳阳供电公司变电检修人员在220千伏奇岭变电站成功投运DF6908避雷器在线监测装置。采用带电作业方式安装该装置仅需10分钟。该装置可实现避雷器在线监测,提升电网避雷器智能化运维水平。该装置由太阳能供电,维护次数少、检测精度高,能够每天自动进行避雷器泄漏电流数据实时采样,并形成
近日,2025能源网络通信创新应用大会在杭州召开,华为政企光领域副总裁刘利春发表了“以光促算,AI时代基于fgOTN的电力通信网”主题演讲。他表示,随着加速建设新型电力系统以及大模型的普及部署,电网需构建主配一体的通信目标网,为海量数据和大模型间提供确定性入算联接,提升电网调控水平,实现以
全面推行光伏建筑一体化,光伏发电自发自用,还有余电上网;利用5G、物联网、大数据、人工智能技术,提高智能管理水平,降低综合能耗……近年来,江西吉安市峡江县积极策应绿色低碳经济发展战略,探索零碳数智发展模式,推进物流园区光伏建设、物流车辆电动化、数字化赋能降碳等,打造全省首个零碳物流
为加快推广节能降碳先进技术,加强重点行业领域技术改造升级和大规模设备更新,现组织开展2025年度工业和信息化领域节能降碳技术装备推荐工作。以支撑实现碳达峰碳中和为导向,择优推荐节能降碳效果明显、技术成熟可靠、具备经济效益和推广潜力,能够实现全流程系统节能降碳或跨行业、领域融合创新的技
4月28日,工信部发布组织开展2025年度国家工业和信息化领域节能降碳技术装备推荐工作的通知,推荐范围有五大方面,其中用能低碳转型技术包括清洁低碳氢制备及应用、高效储能、工业绿色微电网等可再生能源消纳技术;余热余压高效利用、系统能量梯级利用、电能替代等多能高效互补技术等。原文如下:工业
北极星环保获悉,4月28日,工信部节能与综合利用司发布《工业和信息化部办公厅关于组织开展2025年度国家工业和信息化领域节能降碳技术装备推荐工作的通知》,通知指出,加快推广节能降碳先进技术,加强重点行业领域技术改造升级和大规模设备更新,以支撑实现碳达峰碳中和为导向,择优推荐节能降碳效果
北极星储能网获悉,4月28日,工信部发布组织开展2025年度国家工业和信息化领域节能降碳技术装备推荐工作的通知,推荐范围有五大方面,其中用能低碳转型技术包括清洁低碳氢制备及应用、高效储能、工业绿色微电网等可再生能源消纳技术;余热余压高效利用、系统能量梯级利用、电能替代等多能高效互补技术
2025年4月,交通运输部联合国家发展改革委等十部门发布的《关于推动交通运输与能源融合发展的指导意见》(以下简称《指导意见》),不仅是一份政策文件,更是中国在“双碳”目标下的一场系统性变革的宣言。这份文件以交通与能源的深度融合为核心,试图打破行业壁垒,重塑产业链条,为中国乃至全球的绿
日前,中国化学东华公司总承包的中海壳牌惠州三期乙烯项目污水处理场项目举行现场开工仪式并召开开工交流会。公司工会主席、董事会秘书余伟胜出席会议。开工交流会听取了项目团队及各职能部门对于数字化交付、智慧工地、智慧仓储等实施内容及后期规划的报告。针对项目下一步建设工作,余伟胜强调,项目
一键操作实现核电机组自动化启停,200万组/秒的数据流全天候捕捉设备“生命体征”,核电厂融合通信网络让信息传输驶入高速公路……记者从4月27日举办的第十六届中国国际核电工业展览会上获悉,我国首个核电工业操作系统——中广核“智能核电”正式发布,对我国核电工业智能化转型升级具有重要意义。“
近日,国家发展改革委、国家能源局发布《关于加快推进虚拟电厂发展的指导意见》,提出积极推动虚拟电厂因地制宜发展,针对省级、地市级电力调节需要,培育不同特点的虚拟电厂主体,完善虚拟电厂发展体系。此前,多地已针对虚拟电厂建设和运营开展了积极探索。为了解当前虚拟电厂建设情况,中能传媒记者
4月23日,在上海气候周2025“气候灯塔·新纪元”主题活动上,隆基嘉兴基地作为全球光伏行业首个“灯塔工厂+零碳工厂”的双标杆实践,荣获“上海气候周气候灯塔2025年度制造灯塔典范奖”。隆基绿能浙江基地负责人刘爱军(左二)上台领奖上海气候周以“中国行动、亚洲声音、世界标准”为宗旨,由联合国和
一季度,南方电网经营区域全社会用电量3809亿千瓦时,同比增长4%,增速高于全国1.5个百分点,较1-2月累计增速提高1个百分点,体现南方区域经济运行起步平稳、开局良好,高质量发展态势持续巩固。从分产业看,一季度,南方电网经营区域第一、第二、第三产业用电量和城乡居民生活用电量同比分别增长7.4%
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!