登录注册
请使用微信扫一扫
关注公众号完成登录
我要投稿
“大数据”是在2013年被用滥了的词汇,但实际上,由于数据量缺失、大数据清洗和分析能力不足,以及数据可视化瓶颈等问题,“大数据”一直未能迟迟落地。而在最近,随着基础设施的发展,意味着大数据的发展又走到新的一个临界点。系统软件供应商SoftwareAG的GaganMehra,在Venturebeat网站阐述了他对于大数据接下来发展的认识,他认为更快地数据处理、更可靠地数据质量,以及给更加细分的应用市场,是大数据2.0时代的重要特征。
更快的数据处理速度
由于数据量指数型增长,使得对于数据的快速分析的需要已经变得比以往任何时候都要迫切。几乎每家大数据厂商,都想要兜售比别家处理速度更快的产品。Hadoop发布的新品Hadoop2.0/YARN,几乎能实时分析数据。而下一代大数据的计算牵引框架ApacheSpark,它的速度比Hadoop快100倍。硅谷风险投资机构AndreessenHorowitz,已经以1400万美元的价格,领投了一家以ApacheSpark为业务核心的初创企业Databricks。不久前,亚马逊也上线了实时流数据服务Kinesis,来帮助没有数据处理能力的公司解决这一问题。
许多分析供应商都已经认识到了数据处理速度的重要性,并建立了能够每秒处理TB数据的产品。传感器数据分析、物联网在工业和消费级市场快速发展的势头,驱动了这次变革。比如一家企业的传感器,能够每秒产生出数百次的事件,实时处理这些数据难度很高。特别是当实时处理的传感器数据,激增到一天5TB的时候,速度,就成了尤为关键的指标。
同时,尽管数据存储成本已经累年下降,但数据存储的费用还是不小的一笔支出。部分商家相比存储完整数据流而言,更倾向于保存过滤掉噪音的数据。
智能清洗“垃圾数据”
在本就难以计数的数据量继续以指数模型激增时,对于数据质量的强化,便摆上了许多数据供应商的议程。换句话说,在庞大数据面前,即使计算机能够高效的处理它们,但大量无用的“垃圾”数据,只会给系统带来负担,并增添存储、主机等设备成本。这就需要数据处理过程中,根据特定的规则和参数,对涌进数据流进行“清洗”和分析,并自动决策该去处理哪些数据,这一切不再需要人工去干预。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
近日,四川省经济和信息化厅公示了2025年第二批“企业找技术”揭榜挂帅项目定帅结果,环天智慧公司荣誉上榜。《高分辨率碳源监测卫星研发设计与反演算法》项目由环天智慧公司与南京航空航天大学航天学院开展深度合作,旨在研发具备高精度监测能力的碳源遥感卫星,通过创新性的光学载荷设计与智能反演算
最近《人民日报》通过专访任正非对外释放了重要信号。其中也讲到了,AI竞争的背后,是要有充足的电力、发达的信息网络,而中国有这样的优势。可以说,AI的尽头是算力,算力的尽头是电力,这已成为科技行业的共识。本期「电网深谈」邀请了阿里云能源行业首席架构师黄振、浙江省电力负荷管理中心孙钢、浙
6月27日,海尔新能源在南通制造工厂举行了首台户储一体机E-Tower2.0下线仪式。该产品的成功下线,标志着海尔新能源满足欧洲家庭用户需求,布局“分体、一体”双平台产品全系成型,并且实现了在户储领域的AI智能化突破。E-Tower2.0一体机是海尔新能源自定义和研发制造的针对欧洲传统户储系统动态电价策
北极星储能网获悉,2025年6月13日,中国证监会国际司发布关于双登集团境外发行上市及境内未上市股份“全流通”备案通知书(国合函[2025]1001号),通过了在香港联交所上市备案申请。双登集团,成立于2011年,是一家专注于大数据与通信领域的储能电池及储能系统综合解决方案提供商,在全球通信及数据中
指导单位:粤港澳大湾区洗涤商业联合会主办单位:广州加贝斯展览有限公司时间:2026年3月18日-20日地点:澳门威尼斯人金光会展A、B馆前言在全球化和可持续发展的浪潮下,清洁行业已成为城市现代化进程的核心驱动力。中国作为全球清洁产品的生产与出口大国,持续引领技术创新与市场拓展,国际竞争力日益
近日,菲律宾三大数据中心——HIVE菲律宾融合智算中心、ConvergeCaloocan数据中心、及Converge&NAVERCloud联合数据中心分阶段相继投入运营。算力中心全域电力管家正泰,作为核心电力系统承建方,为三大项目提供了关键支撑。菲律宾作为共建“一带一路”的重要节点和RCEP成员国,近年来数字经济蓬勃发展
日前,安阳市生态环境局印发《安阳市“无废城市”建设实施方案(2025—2027年)》(征求意见稿)。文件提出,到2027年底,安阳市“无废城市”制度、市场、技术、监管体系基本完善,主要指标达到省内先进水平,减污降碳协同增效作用初显;安阳市固体废物智慧监管信息平台上线运营,实现五大领域固体废物
北极星售电网获悉,近日,江苏省宜兴市首个虚拟电厂运营平台进入试运行阶段。该平台由宜兴市大数据发展有限公司和无锡市能源集团有限公司联合打造。据悉,此次宜兴市上线试运行的虚拟电厂运营平台,是通过现代信息通信技术和系统集成控制手段,以现有充电桩、分布式光伏、储能等电力设施为基础,整合分
北极星售电网获悉,6月25日,浙江省发展和改革委员会发布省发展改革委关于省十四届人大三次会议舟40号建议的答复。就建议省发改委、省经信厅、省大数据局等部门,统筹全省数据中心发展需求和新能源资源禀赋,支持普陀建设双循环多能互补绿色算力中心试点项目,并争取进入国家算力大通道。同时,支持普
随着互联网、大数据、人工智能等数字技术的发展和应用,推动社会经济以更细颗粒度的数据形式呈现,数据在软科学研究中发挥的作用也越来越大,为数据挖掘等提供了海量的样本数据,这使得建立基于数据驱动的研究范式成为可能,促使软科学研究范式由以往依靠专家驱动为主向数据驱动转变,更加强调运用数字
6月19日,安顺市大数据发展管理局发布安顺市建设数字经济创新区2025年工作要点,文件指出,开展算电协同试点。深化算电协同,探索用电扶持,切实加强与省内电力企业对接,积极探索绿电直供有效途径,推动绿电上网和源网荷储就地消纳,帮助算力企业降低用电成本。原文如下:安顺市建设数字经济创新区202
向智而新,向绿而行。6月28日,为绿色智慧作业——宇通重工品牌焕新暨2025年夏季新品发布会重磅启幕。致力于成为新能源作业设备领导品牌的宇通重工,以“新能源、高效、智能”的崭新战略形象全面开启新的篇章。宇通重工以“新能源作业设备引领者”的全新品牌战略定位,强势开启品牌焕新篇章。响应社会
编者按微电网作为分布式可再生能源发电领域内新兴的前沿技术,已成为一种安全可靠的集成分布式电源及负荷的小型电力系统。近年来,随着分布式电源大量接入,微电网系统惯量不断降低,特别是在孤岛微电网中,由于缺少大电网的支撑,在面对扰动时,系统抗扰能力和频率稳定性显著下降,因此需要调整自身控
电力市场分两级,中长期市场和现货市场,现货市场又可以再分成日前市场和实时市场。(来源:黄师傅说电)中长期市场合约电量不要求物理执行,但要进行金融结算,所以一定程度上具有远期期货的属性。而所谓期货,就是在现货市场开市前,提前给现货市场要交易和交割的商品签订合约,达到提前锁定价格的目
“有了这个‘智能柜’,大大提高了电能表出入库速度,‘先入先出’功能的应用,杜绝了高库领资产的堆积,这个柜体还自带预警系统,实时感知资产存储情况,避免在抢修时多拿错拿,提高了抢修的工作效率,真是既智能又方便啊!”6月25日,国网遵化市供电公司对供电所配备的“智能计量周转柜”进行培训,
各地氢能发展虽然已取得一定进展,但仍面临一些问题和挑战,涉及基础设施、成本、技术等多个方面,这些方面往往相互交织,有时互为因果。来源:电联新媒作者:郑平近年来,国内多地将发展氢能作为促进产业发展和实现碳达峰、碳中和目标的重要抓手,推出不同层面的氢能发展规划,并投入大量资源推动具体
北极星储能网获悉,6月18日的第二届锂电池大会暨亿纬锂能24周年庆上,亿纬锂能披露将在2026年推出能量密度达到350Wh/kg和800Wh/L的全固态电池1.0;在2028年推出1000Wh/L以上的高比能全固态电池2.0产品。其全固态软包电池可实现-20℃~60℃宽温工作,20MPa压力下稳定运行。循环性能上,可以实现45℃@1C,
回首储能行业刚被抽离政策拐杖之初,整个市场不乏犹疑、焦虑的声音。一方面,以低质产品进行低价竞争得以存活的储能企业陆续黯然离场;另一方面,储能在趋向市场化后更加聚焦价值重构,储能企业也在兼顾安全、效率与成本中愈发“求真”,迸发活力。价值导向下,直面储能安全2024年工信部发布的强制性国
从不足百兆瓦到1太瓦,经过数十年的发展,我国光伏发电已从单一能源、补充能源向主力能源进阶。担当“大脑”职能的光伏逆变器,也实现了由“独木桥”向“立交桥”的跨越式进化,从单纯的电能转换设备,蜕变为集高效发电、智能运维、电网支撑等多重功能于一体的能源中枢。在这一过程中,离不开逆变器龙
电化学储能系统在电力系统中的应用场景大致可以分为5类,分别是源侧、网侧(主网)、台区(配网)、工商业以及户用储能。在这些场景中,储能有不同的接入位置,根据市场主体与电网公司的产权分界点来区分,可以把源侧、工商业以及户用都放置于表后的区域,可称为表后大小储,因为这些接入场景中,除了
在全球环境问题日益严峻的背景下,能源转型已成为各国共同面对的重要挑战与机遇。由世界经济论坛(WorldEconomicForum,WEF)发布的《2025年促进有效能源转型》报告为我们提供了深入了解这一复杂议题的机会。该报告分析了118个国家的能源转型指数(EnergyTransitionIndex,ETI),还探讨了各地区在推进能
AI赋能电力产业:变革、挑战与对策中国海油集团能源经济研究院韩广忠王建明近年来,人工智能(AI)技术正以前所未有的速度改变着各行各业,全球电力产业无疑成为获得益处与遭受冲击最为明显的领域之一。从能源生产、输配到消费管理,AI正在全方位推动产业升级,促进数字化转型,并为实现低碳发展和可持
北极星风力发电网讯:6月26日,全球风能理事会(GWEC)20周年庆典在葡萄牙里斯本举行。远景能源凭借在再生能源领域持续的创新、卓越的全球市场领导力及对全球零碳转型的坚定承诺,荣获GWEC“行业领军者”大奖(SegmentChampionsAward)。这一殊荣不仅是对远景能源技术实力的有力认可,更是对其推动全球
6月26日,成都市生态环境局召开新闻通气会,会上通报了近年来成都“无废城市”建设的“成绩单”——建成21类1458个“无废城市细胞”,多个场景入选2024年度国家级“无废企业”典型案例;建成10座建筑垃圾资源化利用示范基地、4个固定消纳场、16个临时消纳场。据悉,聚焦工业园区绿色低碳转型,成都已有
指导单位:粤港澳大湾区洗涤商业联合会主办单位:广州加贝斯展览有限公司时间:2026年3月18日-20日地点:澳门威尼斯人金光会展A、B馆前言在全球化和可持续发展的浪潮下,清洁行业已成为城市现代化进程的核心驱动力。中国作为全球清洁产品的生产与出口大国,持续引领技术创新与市场拓展,国际竞争力日益
日前,安阳市生态环境局印发《安阳市“无废城市”建设实施方案(2025—2027年)》(征求意见稿)。文件提出,到2027年底,安阳市“无废城市”制度、市场、技术、监管体系基本完善,主要指标达到省内先进水平,减污降碳协同增效作用初显;安阳市固体废物智慧监管信息平台上线运营,实现五大领域固体废物
近日,由清华大学、国家电网公司联合主办的“2025国家能源互联网大会”在杭州圆满落幕。大会以“人工智能深化协同,能源科技求索创新”为主题,聚焦人工智能与能源科技深度协同,汇聚全球能源领域政企领袖、学术权威、技术先锋,共探零碳转型路径,共同研讨绘制数字能源时代的“中国方案”。国能日新作
6月19日,安顺市大数据发展管理局发布安顺市建设数字经济创新区2025年工作要点,文件指出,开展算电协同试点。深化算电协同,探索用电扶持,切实加强与省内电力企业对接,积极探索绿电直供有效途径,推动绿电上网和源网荷储就地消纳,帮助算力企业降低用电成本。原文如下:安顺市建设数字经济创新区202
在全球气候变化日益严峻的背景下,国家主席习近平于2020年在联合国大会上宣布了我国的“3060”目标,明确了碳达峰、碳中和(“双碳”)目标的内涵、基本路径和重点任务,“双碳”工作正式上升到国家战略层面。作为实现这一目标的基础性工作,碳排放核算体系的构建和完善尤为重要。碳排放核算是碳管理、
2025年10月30日-11月1日国家会展中心(上海)崧泽大道333号展会规模:25000平方米主办单位:联合国人居署上海市住房与城乡建设管理委员会执行单位:东浩兰生会展集团上海现代国际展览有限公司东浩兰生会展集团上海建智展览有限公司一、总体情况上海国际城市与建筑博览会(以下简称城博会)作为“世界城市日
6月20日,军信股份公告,公司与长沙数字集团有限公司签订《战略合作协议》,双方利用各自优势,助力长沙、湖南以及“一带一路”国家和地区实现“绿色低碳+人工智能”协同发展。双方将围绕“无废城市”建设、环保数字化升级、绿色电力和智算产业协同发展等领域展开合作。在绿色算力中心建设运营领域,双
2025年6月20日-21日,2025国家能源互联网大会在杭州国际博览中心成功举办。本届大会由清华大学、国家电网公司联合主办,清华大学能源互联网创新研究院、杭州市萧山区人民政府、国网浙江省电力有限公司杭州供电公司、中国能源研究会承办,清华四川能源互联网研究院、清华大学碳中和研究院、清华大学国家
AI大模型时代,我国提出开展“人工智能+”行动,AI智能体(Agent)被认为是“人工智能+”赋能各行各业应用落地的关键。生成式AI的发展是划时代的,堪比50年前个人电脑的出现和30年前互联网的出现,未来10年从个人生活方式到社会经济的方方面面,都会被颠覆或者重构。2025年政府工作报告明确提出持续推
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!