登录注册
请使用微信扫一扫
关注公众号完成登录
我要投稿
“大数据”是在2013年被用滥了的词汇,但实际上,由于数据量缺失、大数据清洗和分析能力不足,以及数据可视化瓶颈等问题,“大数据”一直未能迟迟落地。而在最近,随着基础设施的发展,意味着大数据的发展又走到新的一个临界点。系统软件供应商SoftwareAG的GaganMehra,在Venturebeat网站阐述了他对于大数据接下来发展的认识,他认为更快地数据处理、更可靠地数据质量,以及给更加细分的应用市场,是大数据2.0时代的重要特征。
更快的数据处理速度
由于数据量指数型增长,使得对于数据的快速分析的需要已经变得比以往任何时候都要迫切。几乎每家大数据厂商,都想要兜售比别家处理速度更快的产品。Hadoop发布的新品Hadoop2.0/YARN,几乎能实时分析数据。而下一代大数据的计算牵引框架ApacheSpark,它的速度比Hadoop快100倍。硅谷风险投资机构AndreessenHorowitz,已经以1400万美元的价格,领投了一家以ApacheSpark为业务核心的初创企业Databricks。不久前,亚马逊也上线了实时流数据服务Kinesis,来帮助没有数据处理能力的公司解决这一问题。
许多分析供应商都已经认识到了数据处理速度的重要性,并建立了能够每秒处理TB数据的产品。传感器数据分析、物联网在工业和消费级市场快速发展的势头,驱动了这次变革。比如一家企业的传感器,能够每秒产生出数百次的事件,实时处理这些数据难度很高。特别是当实时处理的传感器数据,激增到一天5TB的时候,速度,就成了尤为关键的指标。
同时,尽管数据存储成本已经累年下降,但数据存储的费用还是不小的一笔支出。部分商家相比存储完整数据流而言,更倾向于保存过滤掉噪音的数据。
智能清洗“垃圾数据”
在本就难以计数的数据量继续以指数模型激增时,对于数据质量的强化,便摆上了许多数据供应商的议程。换句话说,在庞大数据面前,即使计算机能够高效的处理它们,但大量无用的“垃圾”数据,只会给系统带来负担,并增添存储、主机等设备成本。这就需要数据处理过程中,根据特定的规则和参数,对涌进数据流进行“清洗”和分析,并自动决策该去处理哪些数据,这一切不再需要人工去干预。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
在日前落幕的第二十三届“深圳(湾区)知名品牌”评选活动中,深圳市清泉水业股份有限公司(以下简称“深圳清泉”)凭借其在水处理领域的技术突破与行业引领力,从数百家参评企业中脱颖而出,荣获“深圳知名品牌”称号。这一荣誉不仅是对深圳清泉品牌实力的权威认证,更彰显了深圳在培育具有国际竞争力
电力市场正经历从计划经济向市场化转型的深刻变革,随着新能源全面入市和全国统一电力市场的建设推进,电力交易的盈利模式正从单一差价套利转向多元化增值服务。一度电在电力市场交易中有多少利润?成为电力产业链上各环节参与者,尤其是发电企业、电网企业、售电公司关注的核心问题。(来源:北极星电
北极星售电网获悉,6月29日,贵州省人民政府发布2025年贵州省重大工程和重点项目名单,其中包括修文县首融独立储能电站及虚拟电厂项目、贵安新区源网荷储一体化及多能互补建设项目等共3199个。详情如下:2025年贵州省重大工程和重点项目名单(共3199个)一、四化项目(2438个)(一)新型工业化(1429
近日,四川省经济和信息化厅公示了2025年第二批“企业找技术”揭榜挂帅项目定帅结果,环天智慧公司荣誉上榜。《高分辨率碳源监测卫星研发设计与反演算法》项目由环天智慧公司与南京航空航天大学航天学院开展深度合作,旨在研发具备高精度监测能力的碳源遥感卫星,通过创新性的光学载荷设计与智能反演算
最近《人民日报》通过专访任正非对外释放了重要信号。其中也讲到了,AI竞争的背后,是要有充足的电力、发达的信息网络,而中国有这样的优势。可以说,AI的尽头是算力,算力的尽头是电力,这已成为科技行业的共识。本期「电网深谈」邀请了阿里云能源行业首席架构师黄振、浙江省电力负荷管理中心孙钢、浙
6月27日,海尔新能源在南通制造工厂举行了首台户储一体机E-Tower2.0下线仪式。该产品的成功下线,标志着海尔新能源满足欧洲家庭用户需求,布局“分体、一体”双平台产品全系成型,并且实现了在户储领域的AI智能化突破。E-Tower2.0一体机是海尔新能源自定义和研发制造的针对欧洲传统户储系统动态电价策
北极星储能网获悉,2025年6月13日,中国证监会国际司发布关于双登集团境外发行上市及境内未上市股份“全流通”备案通知书(国合函[2025]1001号),通过了在香港联交所上市备案申请。双登集团,成立于2011年,是一家专注于大数据与通信领域的储能电池及储能系统综合解决方案提供商,在全球通信及数据中
指导单位:粤港澳大湾区洗涤商业联合会主办单位:广州加贝斯展览有限公司时间:2026年3月18日-20日地点:澳门威尼斯人金光会展A、B馆前言在全球化和可持续发展的浪潮下,清洁行业已成为城市现代化进程的核心驱动力。中国作为全球清洁产品的生产与出口大国,持续引领技术创新与市场拓展,国际竞争力日益
最近,国网江苏省电力有限公司信通公司牵头申报的ISO/IEC(国际标准化组织和国际电工委员会)标准提案《面向智慧城市数字化平台的ISO-IEC24039案例研究》成功立项,可为政府部门提供数据查询、安全管控、城市治理等服务。读完这则消息,笔者生出许多感慨来。随着大数据与人工智能技术的广泛应用,全球
近日,菲律宾三大数据中心——HIVE菲律宾融合智算中心、ConvergeCaloocan数据中心、及Converge&NAVERCloud联合数据中心分阶段相继投入运营。算力中心全域电力管家正泰,作为核心电力系统承建方,为三大项目提供了关键支撑。菲律宾作为共建“一带一路”的重要节点和RCEP成员国,近年来数字经济蓬勃发展
日前,安阳市生态环境局印发《安阳市“无废城市”建设实施方案(2025—2027年)》(征求意见稿)。文件提出,到2027年底,安阳市“无废城市”制度、市场、技术、监管体系基本完善,主要指标达到省内先进水平,减污降碳协同增效作用初显;安阳市固体废物智慧监管信息平台上线运营,实现五大领域固体废物
世界上规模最大,安全运行水平最高,拥有世界最高电压等级、最大装机容量和发电量,消纳着世界上最大规模的清洁能源……如今的中国电网,总能让人用起电来稳稳的、很安心。可你知道吗?20世纪90年代以前,我国电网“生病”还比较频繁。电网工作者统计发现,超半数的稳定性破坏事故,都源于继电保护缺陷
在上文中(相关阅读),我们分析了山西省现货市场进入新阶段以后,价差呈现负价差收窄和分时局部性增强等特点,并尝试剖析了其中的原因。本篇将继续通过现货申报的实战案例,给出基于梯度提升树的算法模型解决方案,计算山西现货市场的利润空间,并讨论未来策略的改进方向。四、应对策略与实践案例4.1
北极星售电网获悉,6月29日,贵州省人民政府发布2025年贵州省重大工程和重点项目名单,其中包括修文县首融独立储能电站及虚拟电厂项目、贵安新区源网荷储一体化及多能互补建设项目等共3199个。详情如下:2025年贵州省重大工程和重点项目名单(共3199个)一、四化项目(2438个)(一)新型工业化(1429
向智而新,向绿而行。6月28日,为绿色智慧作业——宇通重工品牌焕新暨2025年夏季新品发布会重磅启幕。致力于成为新能源作业设备领导品牌的宇通重工,以“新能源、高效、智能”的崭新战略形象全面开启新的篇章。宇通重工以“新能源作业设备引领者”的全新品牌战略定位,强势开启品牌焕新篇章。响应社会
编者按微电网作为分布式可再生能源发电领域内新兴的前沿技术,已成为一种安全可靠的集成分布式电源及负荷的小型电力系统。近年来,随着分布式电源大量接入,微电网系统惯量不断降低,特别是在孤岛微电网中,由于缺少大电网的支撑,在面对扰动时,系统抗扰能力和频率稳定性显著下降,因此需要调整自身控
电力市场分两级,中长期市场和现货市场,现货市场又可以再分成日前市场和实时市场。(来源:黄师傅说电)中长期市场合约电量不要求物理执行,但要进行金融结算,所以一定程度上具有远期期货的属性。而所谓期货,就是在现货市场开市前,提前给现货市场要交易和交割的商品签订合约,达到提前锁定价格的目
“有了这个‘智能柜’,大大提高了电能表出入库速度,‘先入先出’功能的应用,杜绝了高库领资产的堆积,这个柜体还自带预警系统,实时感知资产存储情况,避免在抢修时多拿错拿,提高了抢修的工作效率,真是既智能又方便啊!”6月25日,国网遵化市供电公司对供电所配备的“智能计量周转柜”进行培训,
各地氢能发展虽然已取得一定进展,但仍面临一些问题和挑战,涉及基础设施、成本、技术等多个方面,这些方面往往相互交织,有时互为因果。来源:电联新媒作者:郑平近年来,国内多地将发展氢能作为促进产业发展和实现碳达峰、碳中和目标的重要抓手,推出不同层面的氢能发展规划,并投入大量资源推动具体
北极星储能网获悉,6月18日的第二届锂电池大会暨亿纬锂能24周年庆上,亿纬锂能披露将在2026年推出能量密度达到350Wh/kg和800Wh/L的全固态电池1.0;在2028年推出1000Wh/L以上的高比能全固态电池2.0产品。其全固态软包电池可实现-20℃~60℃宽温工作,20MPa压力下稳定运行。循环性能上,可以实现45℃@1C,
回首储能行业刚被抽离政策拐杖之初,整个市场不乏犹疑、焦虑的声音。一方面,以低质产品进行低价竞争得以存活的储能企业陆续黯然离场;另一方面,储能在趋向市场化后更加聚焦价值重构,储能企业也在兼顾安全、效率与成本中愈发“求真”,迸发活力。价值导向下,直面储能安全2024年工信部发布的强制性国
从不足百兆瓦到1太瓦,经过数十年的发展,我国光伏发电已从单一能源、补充能源向主力能源进阶。担当“大脑”职能的光伏逆变器,也实现了由“独木桥”向“立交桥”的跨越式进化,从单纯的电能转换设备,蜕变为集高效发电、智能运维、电网支撑等多重功能于一体的能源中枢。在这一过程中,离不开逆变器龙
国家第二批大基地重点项目——国能大柴旦100万千瓦风光储一体化项目中的70万千瓦光伏工程顺利实现并网发电。该项目坐落于青海省海西州大柴旦行委锡铁山镇,地处海拔3200米的戈壁荒漠地带,总装机容量700MW,由108个光伏子方阵组成,并配套建设330kV升压站。作为新能源功率预测系统解决方案提供商,国能
电力市场正经历从计划经济向市场化转型的深刻变革,随着新能源全面入市和全国统一电力市场的建设推进,电力交易的盈利模式正从单一差价套利转向多元化增值服务。一度电在电力市场交易中有多少利润?成为电力产业链上各环节参与者,尤其是发电企业、电网企业、售电公司关注的核心问题。(来源:北极星电
近日,山西钢构科工有限公司荣获“Ⅰ型三星”零碳工厂认证证书,继获评“国家级绿色工厂”后,此次通过零碳工厂认证是对公司长期坚持绿色建造、推动低碳发展的高度认可,标志着公司在环境保护和可持续发展方面又迈出了重要一步!零碳工厂是指在温室气体排放核算边界内,通过技术性节能减排、可再生能源
北极星风力发电网讯:6月26日,全球风能理事会(GWEC)20周年庆典在葡萄牙里斯本举行。远景能源凭借在再生能源领域持续的创新、卓越的全球市场领导力及对全球零碳转型的坚定承诺,荣获GWEC“行业领军者”大奖(SegmentChampionsAward)。这一殊荣不仅是对远景能源技术实力的有力认可,更是对其推动全球
6月26日,成都市生态环境局召开新闻通气会,会上通报了近年来成都“无废城市”建设的“成绩单”——建成21类1458个“无废城市细胞”,多个场景入选2024年度国家级“无废企业”典型案例;建成10座建筑垃圾资源化利用示范基地、4个固定消纳场、16个临时消纳场。据悉,聚焦工业园区绿色低碳转型,成都已有
指导单位:粤港澳大湾区洗涤商业联合会主办单位:广州加贝斯展览有限公司时间:2026年3月18日-20日地点:澳门威尼斯人金光会展A、B馆前言在全球化和可持续发展的浪潮下,清洁行业已成为城市现代化进程的核心驱动力。中国作为全球清洁产品的生产与出口大国,持续引领技术创新与市场拓展,国际竞争力日益
日前,安阳市生态环境局印发《安阳市“无废城市”建设实施方案(2025—2027年)》(征求意见稿)。文件提出,到2027年底,安阳市“无废城市”制度、市场、技术、监管体系基本完善,主要指标达到省内先进水平,减污降碳协同增效作用初显;安阳市固体废物智慧监管信息平台上线运营,实现五大领域固体废物
近日,由清华大学、国家电网公司联合主办的“2025国家能源互联网大会”在杭州圆满落幕。大会以“人工智能深化协同,能源科技求索创新”为主题,聚焦人工智能与能源科技深度协同,汇聚全球能源领域政企领袖、学术权威、技术先锋,共探零碳转型路径,共同研讨绘制数字能源时代的“中国方案”。国能日新作
6月19日,安顺市大数据发展管理局发布安顺市建设数字经济创新区2025年工作要点,文件指出,开展算电协同试点。深化算电协同,探索用电扶持,切实加强与省内电力企业对接,积极探索绿电直供有效途径,推动绿电上网和源网荷储就地消纳,帮助算力企业降低用电成本。原文如下:安顺市建设数字经济创新区202
在全球气候变化日益严峻的背景下,国家主席习近平于2020年在联合国大会上宣布了我国的“3060”目标,明确了碳达峰、碳中和(“双碳”)目标的内涵、基本路径和重点任务,“双碳”工作正式上升到国家战略层面。作为实现这一目标的基础性工作,碳排放核算体系的构建和完善尤为重要。碳排放核算是碳管理、
2025年10月30日-11月1日国家会展中心(上海)崧泽大道333号展会规模:25000平方米主办单位:联合国人居署上海市住房与城乡建设管理委员会执行单位:东浩兰生会展集团上海现代国际展览有限公司东浩兰生会展集团上海建智展览有限公司一、总体情况上海国际城市与建筑博览会(以下简称城博会)作为“世界城市日
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!