登录注册
请使用微信扫一扫
关注公众号完成登录
我要投稿
“大数据”是在2013年被用滥了的词汇,但实际上,由于数据量缺失、大数据清洗和分析能力不足,以及数据可视化瓶颈等问题,“大数据”一直未能迟迟落地。而在最近,随着基础设施的发展,意味着大数据的发展又走到新的一个临界点。系统软件供应商SoftwareAG的GaganMehra,在Venturebeat网站阐述了他对于大数据接下来发展的认识,他认为更快地数据处理、更可靠地数据质量,以及给更加细分的应用市场,是大数据2.0时代的重要特征。
更快的数据处理速度
由于数据量指数型增长,使得对于数据的快速分析的需要已经变得比以往任何时候都要迫切。几乎每家大数据厂商,都想要兜售比别家处理速度更快的产品。Hadoop发布的新品Hadoop2.0/YARN,几乎能实时分析数据。而下一代大数据的计算牵引框架ApacheSpark,它的速度比Hadoop快100倍。硅谷风险投资机构AndreessenHorowitz,已经以1400万美元的价格,领投了一家以ApacheSpark为业务核心的初创企业Databricks。不久前,亚马逊也上线了实时流数据服务Kinesis,来帮助没有数据处理能力的公司解决这一问题。
许多分析供应商都已经认识到了数据处理速度的重要性,并建立了能够每秒处理TB数据的产品。传感器数据分析、物联网在工业和消费级市场快速发展的势头,驱动了这次变革。比如一家企业的传感器,能够每秒产生出数百次的事件,实时处理这些数据难度很高。特别是当实时处理的传感器数据,激增到一天5TB的时候,速度,就成了尤为关键的指标。
同时,尽管数据存储成本已经累年下降,但数据存储的费用还是不小的一笔支出。部分商家相比存储完整数据流而言,更倾向于保存过滤掉噪音的数据。
智能清洗“垃圾数据”
在本就难以计数的数据量继续以指数模型激增时,对于数据质量的强化,便摆上了许多数据供应商的议程。换句话说,在庞大数据面前,即使计算机能够高效的处理它们,但大量无用的“垃圾”数据,只会给系统带来负担,并增添存储、主机等设备成本。这就需要数据处理过程中,根据特定的规则和参数,对涌进数据流进行“清洗”和分析,并自动决策该去处理哪些数据,这一切不再需要人工去干预。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
近日,南方能源大数据中心与南方电网大湾区数字产业基地顺利投产,标志着南方电网公司基本建成“3+1+X”架构的绿色节能新型数据基础设施。南方能源大数据中心位于全国一体化算力网络国家枢纽节点贵州(贵安)枢纽,首期规划建成两栋机楼及一栋运检楼,承载约2000架10千瓦机柜,定位南方电网公司双活生
日前,南方能源大数据中心与南方电网大湾区数字产业基地分别在贵州贵阳、广东惠州投产,标志着南方电网公司基本建成“3+1+X”架构的绿色节能新型数据基础设施,有力展示公司主动融入国家“东数西算”工程建设,加快数字化转型和数字电网建设,加快向数字电网运营商、能源产业价值链整合商、能源生态系
问:您常年从事汽车相关教学工作,对新能源汽车行业的发展较为关注。随着新能源汽车越来越普及,我国充电基础设施也在快速发展,您对此有何看法?杨金龙:近年来,我国新能源汽车行业发展迅猛,充电基础设施建设也取得了令人瞩目的成绩。在我所生活的浙江省杭州市桐庐县,无论是旅游景区还是公共停车场
国家电网有限公司大数据中心深入贯彻落实国家电网有限公司第四届职工代表大会第五次会议暨2025年工作会议精神,牢牢把握“强化企业级统筹”“深化数字赋能赋效”“强化人工智能应用”“加强自主运维”四个方面要求,激活数据要素价值,全力支撑健全完善数字化工作体系、构建新型电力系统、发展新质生产
近日,四川能源监管办发布2024年度煤电机组大数据监管情况通报。通报指出,四川燃煤发电持续发挥“关键少数”重要作用,煤电兜底保障基础不断夯实,顶峰保供能力进一步发挥,企业经营情况进一步改善。全年枯水期完成发电量335.03亿千瓦时,提供了四川主网三分之一以上电量。2024年四川燃煤火电机组平均
2月17日,山东淄博供电公司电力气象智慧预警大数据应用平台上线。该平台深度融合电力数据和气象数据,增强了电力气象灾害的主动预警能力,为淄博电网防灾减灾、安全稳定运行提供保障。强风、雷暴等恶劣天气容易影响电网设备安全运行。为此,淄博供电公司与山东省电力气象技术创新中心联合组建攻坚团队
近日,福建龙岩供电公司发布龙岩市开工生产分析报告。此报告基于多维度与海量数据统计分析,详细呈现了各行业的生产经营变化情况,为政府精准制定政策、推动经济稳健复苏提供了数据支撑。该公司广泛收集企业开工生产相关数据,通过设定复工及达产指数,量化评估企业开工水平及达到正常生产用能水平情况
近日,福建龙岩供电公司发布龙岩市开工生产分析报告。此报告基于多维度与海量数据统计分析,详细呈现了各行业的生产经营变化情况,为政府精准制定政策、推动经济稳健复苏提供了数据支撑。该公司广泛收集企业开工生产相关数据,通过设定复工及达产指数,量化评估企业开工水平及达到正常生产用能水平情况
近日,由国网湖南省电力有限公司牵头,中国南方电网有限责任公司、中国长江三峡集团有限公司、华中科技大学、湖南大学和华为技术有限公司等共同编写的水电物联网国际标准IEEEStd2413.3-2024《水电能源物联网导则》正式获批发布。据介绍,在水电能源物联网领域,尤其是在水利水电工程中,数据壁垒易导致
2025年春节,浙江的大街小巷满是烟火与欢笑,当古镇的红灯笼与现代化都市的霓虹一同点亮新春夜空,你是否想过,这背后的用电数据是怎样的经济密码?它们串联起千家万户的团圆,映射出产业发展的新态势。现在,就跟着小e,看看2025年春节浙江用电数据藏着哪些惊喜。刚刚过去的春节(1月28日-2月4日),
正月初九,尽管春节假期已经结束了,但过年的热闹劲儿还未完全消散。2024年12月,中国春节成功列入《人类非物质文化遗产代表作名录》,紧接着,我们迎来了意义非凡的第一个“非遗版”春节。办年货作为春节里必不可少的仪式,承载着我们对新年的期待与祝福。当年轻一代逐渐接过年货采购的接力棒,又是什
北极星氢能网获悉,近日,总投资1500万元,占地2400平方米的常发新能源氢能存储及制备技术中试基地项目开工仪式,在高新区SEPP中欧跨采先进制造产业园举行。常发新能源2021年落户高新区,致力于光解水制氢技术的研发。作为一家以科技创新为核心驱动力的企业,常发新能源始终坚持以突破关键核心技术为目
2月13日,江苏常发新能源氢能存储及制备技术中试基地项目开工仪式,在高新区SEPP中欧跨采先进制造产业园举行。扬州市常发新能源科技有限公司由欧洲工程院院士、南京航空航天大学教授常焜,于2021年在高新区创办。企业坚持以突破关键核心技术为目标,不断推进太阳光能高效催化水裂解制氢的研究和应用。
北极星储能网获悉,据国家知识产权局,12月6日,中车株洲电力机车有限公司申请一项名为“钠电池储能系统故障诊断方法、设备及存储介质”的专利,公开号CN119087242A,申请日期为2024年10月。专利摘要显示,本申请公开了一种钠电池储能系统故障诊断方法、设备及存储介质,涉及数据处理技术领域,所述方
企查查数据显示,国内现存储能相关企业22.8万家。截至目前,今年已注册7.81万家储能相关企业。其中前10月共注册7.08万家,同比增长20.72%。11月28日,腾讯成功落地了风电、光伏、储能一体化的数据中心微电网项目。这是国内首个采用“风光储+负荷”智能管理模式的数据中心微电网项目,也是腾讯数据中心
近日,河北省首座钒锂结合储能电站,也是华北地区第一座采用全球领先的AC存储(交直流一体)结构的储能电站正式启用,由河北燕赵兴泰储能科技有限公司投资开发,该项目标志着河北省在新型储能领域的重要突破,更是该省独立储能的标杆。共使用了21套阳光电源PowerTitan2.0液冷储能系统,现场从调试到并
北极星储能网获悉,近日,经深圳市市场监督管理局批准的《生产经营单位锂离子电池存储使用安全规范》(DB4403/T508—2024)(以下简称《规范》)发布,将于2024年11月1日正式实施。该《规范》由深圳市应急管理局制定并归口,深圳市电池行业协会、欣旺达电子股份有限公司等单位参与编写,明确了锂离子电
日供电80万度,AC存储助力“迎峰度夏这个夏天,国内规模最大的新型储能省级电网集中调度在江苏顺利完成,实现了储能与电源、电网、用电负荷等的高效灵活互动。其中,由中城大有投建的泰州海陵200MW/400MWh储能电站,参与了本次迎峰度夏集中调度,在电力“保供战”中表现亮眼,日供电近80万度。该电站也
北京排水集团原创厌氧氨氧化(“红菌”)技术成功中标国家存储器基地高氨氮废水处理项目,实现集团原创技术应用转化重大市场突破。国家存储器基地高氨氮废水处理项目位于湖北武汉光谷,作为北京排水集团在半导体芯片废水处理行业的首个工程,在目前“红菌”外部市场转化项目中,规模最大、示范效应最强
近期,由中国华能集团投资、十一科技EPC承建的“华能龙腾特钢20MW/40MWh用户侧储能项目”全容量并网发电,共投运8套2.5MW/5MWh阳光电源PowerTitan2.0液冷储能系统。这是国内首座采用“交直流一体”设计的储能电站,系统效率高于传统储能2%-3%,标志着“AC存储”时代的正式到来。该项目也是中国华能的首
编者按近年来,随着智能电网不断建设和发展,大规模广域数据实时采集和历史数据存储的需求快速增长。5G通信技术有望引领新一轮电力技术革命,其应用场景包括:万物互联、精准控制、海量量测、宽带通信和高效计算等。利用5G技术能够提供更完备的配电网差动保护方案,有利于智能电网的建设。5G技术为变电
3月21日,全省新能源高质量发展座谈会在并召开。会议全面学习贯彻习近平总书记在2月29日中共中央政治局第十二次集体学习时重要讲话精神,认真落实3月12日省委常委会上关于推动我省新能源高质量发展的工作要求,系统阐述新能源发展的重大意义,深入分析我省新能源发展形势,研讨交流促进我省新能源高质
2024年,能源格局深刻变革,政策导向与市场需求为我们指明方向。中央经济工作会议强调大力发展新质生产力,推动数字经济与实体经济深度融合;国家发布的数据基础设施建设指引,为产业发展提供清晰路径。公司表示,随着可再生能源规模化增长,能源协同优化需求呈现井喷之势,威胜信息将迎来新的行业契机
据广西东兴北投环保水务有限公司消息,近日,广西北投环保水务集团自主研发的智慧水务物联网管理平台正式接入人工智能企业深度求索(DeepSeek)的行业大模型系统。这是广西北投环保水务集团首次通用人工智能大模型融入水务物联网管理体系,通过AI技术与水务场景的深度融合,为城市供水、排水、节水和水
江苏无锡的水域面积占全太湖的26%,人口占太湖流域总人口的4.67%。多年来,无锡始终坚持大力推进太湖治理,取得明显成效。聚焦太湖治理的治污、防污、控污等环节,无锡供电公司挖掘电力数据价值,构建图像识别模型,积极参与太湖治理,辅助地方生态环境部门科学决策。2月6日,美丽无锡建设大会暨新一轮
近日,由国网湖南省电力有限公司牵头,中国南方电网有限责任公司、中国长江三峡集团有限公司、华中科技大学、湖南大学和华为技术有限公司等共同编写的水电物联网国际标准IEEEStd2413.3-2024《水电能源物联网导则》正式获批发布。据介绍,在水电能源物联网领域,尤其是在水利水电工程中,数据壁垒易导致
近日,国际电信联盟电信标准化部门(ITU-T)在瑞士日内瓦分别举办2025年SG20和SG21全体会议。在工业和信息化部科技司的指导下,国家电网有限公司自主发起的ITU-T首个能源领域课题组(Q小组)获批成立,4位专家首次获任不同课题组(Q小组)中层职位,12项ITU-T新标准提案全部通过立项决议,标志着国家电
1月13日,天津市发布《天津市促进先进制造业和现代服务业深度融合发展的实施方案》(津发改服务〔2025〕1号),其中指出,鼓励企业加快云计算、大数据、物联网、区块链等新一代信息技术与制造业融合,加强基础软件和工业软件技术攻关,在智能电网、通信、智能交通等行业加快形成规模化应用。原文如下:
为落实国家电网有限公司关于进一步加快数字化转型的相关部署,国网福建省电力有限公司电力科学研究院在省公司数字化部的指导下,开展面向电力物联网场景的全面感知、高效协同智慧物联技术研究,实现海量感知终端设备统一接入、管控和应用,推动数据同源采集、互联互通。截至2024年年底,福建电网接入站
根据产业发展和行业管理需要,有关单位提出了工业和信息化部物联网标准化技术委员会的组建方案。为进一步听取社会各界意见,现将有关委员名单予以公示,截止日期是2025年1月24日。第一届工业和信息化部物联网标准化技术委员会委员名单
近日,南方电网公司牵头,联合国内三大电信运营商、主流通信设备制造商、终端设备厂商、科研机构以及国家电网部分省级电力公司等23家5G确定性网络产业联盟的合作伙伴,共同发布了《5G-A无源物联@电力场景需求分析白皮书》。作为5G电力应用系列白皮书之一,该白皮书详细介绍了5G-A新型无源物联技术特点
12月17日,智芯公司创新研发的行波测距型中压配电物联网化馈线终端(以下简称“新型FTU”),在四川成都、资阳落地应用。参与试点建设的资阳回澜镇供电所运维人员表示:“产品很贴合现场实际应用,为一线运维工人提供了先进的故障研判技术手段,预计可减少约70%的巡线工作量,大幅缩短故障排查时间,提
12月5日,国家能源集团宁东光伏基地集控室的工程师们刚刚完成例行的管控一体化系统定期维护,结果显示系统稳定,运作高效,数据准确,已累计安全生产17个月。管控一体化系统是新能源大基地生产运行的“大脑”和“神经中枢”,是整个新能源基地生产的关键,国家能源集团科技环保有限公司所属国能智深控
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!