登录注册
请使用微信扫一扫
关注公众号完成登录
我要投稿
根据信息处理流程,大数据在智能电网中的应用可以分为数据采集、数据清理、数据存储及处理、数据分析、数据解读和数据应用6个环节,其关键技术包括数据集成技术、数据存储技术、数据处理技术和数据分析技术。
2.1数据集成技术
智能电网大数据具有分散性、多样性和复杂性等特征,这些特征给大数据处理带来极大的挑战。要想处理智能电网大数据,首先就需要对众多数据源的数据进行集成,通过数据抽取、转换、剔除、修正等处理,建立正确、完整、一致、完备、有效的智能电网大数据。目前通常采用的数据集成模型包括数据联邦、基于中间件模型和数据仓库等。
ETL是企业数据集成的主要解决方案。ETL指Extract、Transform、Load,即抽取、转换、加载。数据抽取是从源数据源系统抽取目的数据源系统需要的数据;数据转换是将从源数据源获取的数据按照业务需求,转换成目的数据源要求的形式,并对错误、不一致的数据进行清洗和加工;数据加载是将转换后的数据加载到目的数据源。ETL过程中的主要环节就是数据抽取、数据转换和加工、数据加载。为了实现这些功能,各个ETL工具一般会进行一些功能上的扩充,例如工作流、调度引擎、规则引擎、脚本支持、统计信息等。
数据集成是智能电网大数据应用的关键环节。智能电网大数据集成涉及众多各类型的应用系统,这些系统类型和特征复杂,在实时性要求、数据规模、数据类型等方面存在较大的差异,在智能电网大数据集成中需要综合考虑各种因素,在集成技术上单一技术可能很难实现,需要结合多种技术来实现智能电网大数据的集成。
2.2数据存储技术
在智能电网大数据中,绝大多数数据为结构化数据,同时也存在文本、图像、音频、视频等非结构化或半结构化数据。对非结构化数据可采用分布式文件系统进行存储,对结构松散无模式的半结构化数据可采用分布式数据库,对海量的结构化数据可采用传统关系型数据库系统或分布式并行数据库。
2.2.1 分布式文件系统
分布式文件系统适合存储海量的非结构化数据,将数据存储在物理上分散的多个存储节点上,对这些节点的资源进行统一管理和分配,并向用户提供文件系统访问接口,主要解决本地文件系统在文件大小、文件数量、打开文件数等方面的限制问题。
Hadoop是大数据的一个解决方案,可以实现大数据的存储、分析和管理[9]。HDFS (Hadoop Distributed File System)是一个分布式文件系统,它是开源项目Hadoop的家族成员。HDFS将大规模数据分割为大小为64兆字节的数据块,存储在多个数据节点组成的分布式集群中,当数据规模增加时,只需要在集群中增加更多的数据节点,具有很强的可扩展性;同时每个数据块会在不同的节点中存储多个副本,具有高容错性;由于数据是分布存储的,具有高吞吐量的数据访问能力。
2.2.2 分布式数据库
大数据环境下对数据的存储、管理、查询和分析需要采用新的技术,传统的数据库在数据存储规模、吞吐量、以及数据类型和支撑应用等存在瓶颈。分布式数据库由于具有很好的扩展性和协同性,在大规模数据存储和管理中得到广泛的应用。目前主要有键值存储系统、文档数据库、图数据库等。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
春风拂过黔贵大地,万物复苏;号角响彻苗岭山川,万象更新。3月17日至18日,习近平总书记在贵州考察时强调,贵州要认真落实党中央关于西部大开发和长江经济带发展的战略部署,坚持以高质量发展统揽全局,以进一步全面深化改革开放为动力,坚定信心、苦干实干,稳中求进、善作善成,在中国式现代化进程
中国式现代化和美丽中国在保障能源电力安全-经济-低碳供应、培育新质生产力打造现代能源产业体系等方面对能源电力行业提出了更高要求。面向“十五五”和中长期,源侧生产力结构性变化和荷侧形态多元化对电力系统的影响逐步从量变向质变过渡,电网发展环境面临重大改变,面对当前新能源大发展、电力保供
3月21日,辽宁省工信厅组织开展2025年5G工厂名录项目及优秀案例遴选工作。项目申报主体为制造业、采矿业、电力、港口等重点领域企业,在辽宁省内注册,具备独立法人资格。包括但不限于省级5G工厂,省级“5G+工业互联网”融合应用先导区内5G应用重点企业。原文如下:关于组织开展2025年5G工厂名录项目及
3月21日,辽宁工信厅发布组织开展辽宁省算力强基揭榜行动的通知。任务内容包括算力电力协同应用:揭榜任务:研发基于算力调度技术与能源大模型的多云异构算电协同管理平台,构建基于数据驱动的算力集群用电负荷特性模型、基于计算任务的时空转移特性的能源大模型,推动算力预测与调度技术在智算中心应
日前,河北省农业农村厅、国网河北省电力有限公司、国网冀北电力有限公司联合印发了《河北省2025年电力惠农十项措施》,明确提出贯彻落实2025年中央一号文件要求,按照河北省委、省政府2025年“三农”工作部署,深化政企联动,全面推动农业农村现代化,推进乡村全面振兴,今年计划高质量完成1000个乡村
东风醒芳草,沃野千里处处春。又是一年春耕春播好时节,亦是一年谋划、发力乡村振兴工作的重要节点。乡村振兴,“国之大者”,民之关切。国家电网公司贯彻落实2025年全国两会及中央一号文件精神,发布《2025年助力乡村振兴工作要点》,为推进乡村全面振兴、服务农业强国建设作贡献。这份2025电“靓”乡
算力电力协同发展既是国家电力与算力政策的方向指引,也是电力与算力系统建设的大势所趋。从当前算力电力的发展现状来看,构建全国一体化算力网需要坚强的电力支撑,建设新型电力系统也需要灵活算力的多维助力,因此有必要从电力系统与算力系统的规划、建设着手,从设施、运行、市场与商业模式等多个维
当前,算力电力协同发展不仅面临着用能成本、规划匹配、供需协调、建设时序等重点问题,还要应对电力市场参与、算力应用场景等落地实践的推动压力。强化协同技术的落地应用与试点示范强化算力以及算力电力协同方面的先进技术示范应用,引导和推动算力产业自身的能效提升。芯片层面,我国目前在GPU芯片
发展数字经济是把握新一轮科技革命和产业变革新机遇的战略选择,而算力和电力正是数字经济蓬勃发展的两大关键基础支撑。算力和电力协同发展,既是算力产业高质量发展的必由之路,同时又通过算力赋能电力系统,实现源网荷储协调互动、电力负荷精准预测与调度,提升系统运行效率和对新能源的消纳能力。国
近日,甘肃白银供电公司线损监测人员贾启亮通过该公司自主研发的“台区线损X值分析法”微应用监测台区运行情况时,发现月亮湾台区配电变压器线损率异常。他通过一体化电量与线损管理系统中的“台区售电量”模块核对该台区供售电量数据,看到该台区存在居民用电异常情况,立即通知供电员工赶赴现场进行
3月17日,国网浙江省电力有限公司人工智能实训基地正式启用。该实训基地位于国网浙江电力培训中心内,占地面积约420平方米,单次可容纳54人同时开展实训。基地内设置了平台实训区与仿真验证区,具备人工智能模型开发、训练调优、场景评测等实训功能。据介绍,人工智能实训基地将紧跟国网浙江电力业务需
近日,南方能源大数据中心与南方电网大湾区数字产业基地顺利投产,标志着南方电网公司基本建成“3+1+X”架构的绿色节能新型数据基础设施。南方能源大数据中心位于全国一体化算力网络国家枢纽节点贵州(贵安)枢纽,首期规划建成两栋机楼及一栋运检楼,承载约2000架10千瓦机柜,定位南方电网公司双活生
日前,南方能源大数据中心与南方电网大湾区数字产业基地分别在贵州贵阳、广东惠州投产,标志着南方电网公司基本建成“3+1+X”架构的绿色节能新型数据基础设施,有力展示公司主动融入国家“东数西算”工程建设,加快数字化转型和数字电网建设,加快向数字电网运营商、能源产业价值链整合商、能源生态系
问:您常年从事汽车相关教学工作,对新能源汽车行业的发展较为关注。随着新能源汽车越来越普及,我国充电基础设施也在快速发展,您对此有何看法?杨金龙:近年来,我国新能源汽车行业发展迅猛,充电基础设施建设也取得了令人瞩目的成绩。在我所生活的浙江省杭州市桐庐县,无论是旅游景区还是公共停车场
国家电网有限公司大数据中心深入贯彻落实国家电网有限公司第四届职工代表大会第五次会议暨2025年工作会议精神,牢牢把握“强化企业级统筹”“深化数字赋能赋效”“强化人工智能应用”“加强自主运维”四个方面要求,激活数据要素价值,全力支撑健全完善数字化工作体系、构建新型电力系统、发展新质生产
近日,四川能源监管办发布2024年度煤电机组大数据监管情况通报。通报指出,四川燃煤发电持续发挥“关键少数”重要作用,煤电兜底保障基础不断夯实,顶峰保供能力进一步发挥,企业经营情况进一步改善。全年枯水期完成发电量335.03亿千瓦时,提供了四川主网三分之一以上电量。2024年四川燃煤火电机组平均
2月17日,山东淄博供电公司电力气象智慧预警大数据应用平台上线。该平台深度融合电力数据和气象数据,增强了电力气象灾害的主动预警能力,为淄博电网防灾减灾、安全稳定运行提供保障。强风、雷暴等恶劣天气容易影响电网设备安全运行。为此,淄博供电公司与山东省电力气象技术创新中心联合组建攻坚团队
近日,福建龙岩供电公司发布龙岩市开工生产分析报告。此报告基于多维度与海量数据统计分析,详细呈现了各行业的生产经营变化情况,为政府精准制定政策、推动经济稳健复苏提供了数据支撑。该公司广泛收集企业开工生产相关数据,通过设定复工及达产指数,量化评估企业开工水平及达到正常生产用能水平情况
近日,福建龙岩供电公司发布龙岩市开工生产分析报告。此报告基于多维度与海量数据统计分析,详细呈现了各行业的生产经营变化情况,为政府精准制定政策、推动经济稳健复苏提供了数据支撑。该公司广泛收集企业开工生产相关数据,通过设定复工及达产指数,量化评估企业开工水平及达到正常生产用能水平情况
近日,由国网湖南省电力有限公司牵头,中国南方电网有限责任公司、中国长江三峡集团有限公司、华中科技大学、湖南大学和华为技术有限公司等共同编写的水电物联网国际标准IEEEStd2413.3-2024《水电能源物联网导则》正式获批发布。据介绍,在水电能源物联网领域,尤其是在水利水电工程中,数据壁垒易导致
2025年春节,浙江的大街小巷满是烟火与欢笑,当古镇的红灯笼与现代化都市的霓虹一同点亮新春夜空,你是否想过,这背后的用电数据是怎样的经济密码?它们串联起千家万户的团圆,映射出产业发展的新态势。现在,就跟着小e,看看2025年春节浙江用电数据藏着哪些惊喜。刚刚过去的春节(1月28日-2月4日),
正月初九,尽管春节假期已经结束了,但过年的热闹劲儿还未完全消散。2024年12月,中国春节成功列入《人类非物质文化遗产代表作名录》,紧接着,我们迎来了意义非凡的第一个“非遗版”春节。办年货作为春节里必不可少的仪式,承载着我们对新年的期待与祝福。当年轻一代逐渐接过年货采购的接力棒,又是什
北极星输配电网获悉,3月20日,国网青海省电力公司总工程师张节潭一行到省气象局调研电力气象服务工作。张节潭指出,气象行业和电力部门进行深度融合是大势所趋,新型电力系统和新型能源体系建设离不开高质量的气象保障服务。他希望后期双方建立信息共享渠道,完善健全合作体制机制,实现行业间信息深
面对湖北省电源渗透率突破30%、电动汽车年均已了解超过40%的行业变局,近日,国网经研院取得重大突破——全国首个装备新型电力系统的《中低压现网规划建设改造技术导则》(以下简称《导则》)正式发布。这一技术标准的正式发布,标志着我国网规划迈入“源网荷储”深度融合的新阶段。《导则》创新构建“
中国式现代化和美丽中国在保障能源电力安全-经济-低碳供应、培育新质生产力打造现代能源产业体系等方面对能源电力行业提出了更高要求。面向“十五五”和中长期,源侧生产力结构性变化和荷侧形态多元化对电力系统的影响逐步从量变向质变过渡,电网发展环境面临重大改变,面对当前新能源大发展、电力保供
巍巍秦岭,绵亘千里,为三秦大地构筑起一道无可替代的绿色生命线。在这里,一台台风机巍然耸立,一排排光伏板熠熠生辉,抽水蓄能电站于青山绿水间拔地而起,绘就绿色低碳发展美丽画卷。为加快建设新型电力系统,推进能源清洁低碳转型,国网陕西省电力有限公司牢记“国之大者”,始终践行人民电业为人民
3月14日,国家能源局召开2025年全国电力系统运行方式汇报分析会暨并网电厂涉网安全管理联席会议,总结2024年电网安全风险管控和并网电厂涉网安全管理工作,分析研判2025年全国电力系统运行的主要特点以及安全风险,研究部署电网安全风险管控年度重点任务。局党组成员、副局长何洋出席会议并讲话。会议
近期,DeepSeek开源和开放的特点引发了广泛关注。截至2月3日,DeepSeekV3的Github仓库的Star数已达到69.3k、Fork数已达到10.5k,且其热度还在持续走高,市场份额也在不断扩大。在数字化浪潮席卷全球的当下,开源技术已然成为推动各行业创新发展的关键驱动力。对于电力行业而言,电力开源技术生态体系建
3月14日,国网天津电科院协助河北区政府在天津市电力物联网重点实验室举办河北区所属天津市企业重点实验室政企参观交流活动。河北区政府副区长、区科技局、4家天津市企业重点实验室代表参加。政企交流活动代表到电科院天津市电力物联网重点实验室参观电力电缆分实验室、储能分实验室、网络与信息安全分
自2022年ChatGPT发布以来,社会各方高度关注算力中心的能耗情况。随着今年年初DeepSeek爆火,有观点认为“人工智能的尽头是算力,算力的尽头是电力”,进一步提升了社会对算力用电的关注度。就人工智能本身算力的用电量而言,其不仅与算力芯片的能耗,服务器上架率、负载率,数据中心的冷却方式、电能
3月14日,中国能建党委书记、董事长宋海良,党委副书记、总经理倪真在天津拜会中央政治局委员、天津市委书记陈敏尔,天津市委副书记、市长张工,并见证天津市人民政府和中国能建签署战略合作框架协议。双方表示,要深入贯彻落实习近平总书记考察天津重要讲话精神和对天津工作一系列重要指示要求,以推
3月13日,中国电力企业联合会党委书记、常务副理事长杨昆在本部会见了南方电网公司架构部总经理胡志广一行。中电联党委委员、秘书长郝英杰参加会见。杨昆对胡志广一行到访中电联表示欢迎,介绍了中电联的功能定位及服务行业企业相关情况,并围绕分支机构设建设,重点介绍了在行业研究、会员服务、智库
我国数字经济正处于高速发展时期,近年来,国家主管部门先后出台《关于深入实施“东数西算”工程加快构建全国一体化算力网的实施意见》《加快构建新型电力系统行动方案(2024—2027年)》《数据中心绿色低碳发展专项行动计划》等一系列政策,基本形成了支持算力与电力协同发展,创新算力电力协同机制,
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!