登录注册
请使用微信扫一扫
关注公众号完成登录
我要投稿
“大数据”是在2013年被用滥了的词汇,但实际上,由于数据量缺失、大数据清洗和分析能力不足,以及数据可视化瓶颈等问题,“大数据”一直未能迟迟落地。而在最近,随着基础设施的发展,意味着大数据的发展又走到新的一个临界点。系统软件供应商SoftwareAG的GaganMehra,在Venturebeat网站阐述了他对于大数据接下来发展的认识,他认为更快地数据处理、更可靠地数据质量,以及给更加细分的应用市场,是大数据2.0时代的重要特征。
更快的数据处理速度
由于数据量指数型增长,使得对于数据的快速分析的需要已经变得比以往任何时候都要迫切。几乎每家大数据厂商,都想要兜售比别家处理速度更快的产品。Hadoop发布的新品Hadoop2.0/YARN,几乎能实时分析数据。而下一代大数据的计算牵引框架ApacheSpark,它的速度比Hadoop快100倍。硅谷风险投资机构AndreessenHorowitz,已经以1400万美元的价格,领投了一家以ApacheSpark为业务核心的初创企业Databricks。不久前,亚马逊也上线了实时流数据服务Kinesis,来帮助没有数据处理能力的公司解决这一问题。
许多分析供应商都已经认识到了数据处理速度的重要性,并建立了能够每秒处理TB数据的产品。传感器数据分析、物联网在工业和消费级市场快速发展的势头,驱动了这次变革。比如一家企业的传感器,能够每秒产生出数百次的事件,实时处理这些数据难度很高。特别是当实时处理的传感器数据,激增到一天5TB的时候,速度,就成了尤为关键的指标。
同时,尽管数据存储成本已经累年下降,但数据存储的费用还是不小的一笔支出。部分商家相比存储完整数据流而言,更倾向于保存过滤掉噪音的数据。
智能清洗“垃圾数据”
在本就难以计数的数据量继续以指数模型激增时,对于数据质量的强化,便摆上了许多数据供应商的议程。换句话说,在庞大数据面前,即使计算机能够高效的处理它们,但大量无用的“垃圾”数据,只会给系统带来负担,并增添存储、主机等设备成本。这就需要数据处理过程中,根据特定的规则和参数,对涌进数据流进行“清洗”和分析,并自动决策该去处理哪些数据,这一切不再需要人工去干预。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
7月18日,国务院新闻办公室举行新闻发布会,介绍2025年上半年工业和信息化发展情况。工业和信息化部总工程师谢少锋,部新闻发言人、运行监测协调局局长陶青,部信息通信发展司司长谢存出席发布会,介绍相关情况并回答记者提问。上半年工业和信息化事业发展态势良好新型工业化加快推进工业和信息化部总
受持续高温天气影响,重庆市用电需求激增。记者从国网重庆市电力公司获悉,截至7月17日中午,重庆电网负荷攀升至2852万千瓦,创历史新高。面对严峻的保供形势,国网重庆市电力公司全力确保电网安全稳定运行和电力可靠供应。公司实施24小时不间断监控,依托电力大数据提前分析负荷特性,结合气象信息开
7月11日,贵安供电局在新区供电辖区全面启动工业园区、居民小区“一户一表”改造项目,全力打造全国首个“零转供电”示范区。2024年,贵安供电局在全省率先出台《工业园区供电抄表到户升级改造实施方案》,在贵安综合保税区率先推行企业装表到户,实现从“一园一表”到“一企一表”的升级突破,助力园
2025年11月24-26日,深圳会展中心(福田)将迎来三场国家级环境领域盛会——第三届深圳国际生态环境监测产业博览会(EMIE2025)、深圳国际水务科技博览会(IWTE2025)、国际(深圳)环境技术交流与转移博览会(环交会),三展首次同期同地举办,形成“技术研发-应用落地-国际转移”全产业链闭环,为全球生态环境
近日,海辰储能厦门总部基地工厂与重庆基地工厂双双入选2025年度先进级智能工厂榜单。这一殊荣不仅是对两座工厂在制造高端化、智能化、绿色化发展成果的权威认可,更标志着海辰储能以“智造”为引擎,持续夯实储能新质生产力根基,助力新型储能制造业高质量发展。双厂入选,海辰储能以数智化重构制造竞
近期,国家连续发布《关于深化新能源上网电价市场化改革促进新能源高质量发展的通知》(发改价格〔2025〕136号文)(以下简称136号文)、《电力辅助服务市场基本规则》(发改能源规〔2025〕411号)、《关于全面加快电力现货市场建设工作的通知》(发改办体改〔2025〕394号)(以下简称394号文)等系列政
500多家展商800个展位30,000平米展出面积35,000名专业观众一、展会概况深入贯彻落实习近平总书记关于水旱灾害防御和水利基础设施建设的重要指示批示精神,着力推动解决农业小型水利设施老化、塘坝淤塞严重、水渠不畅等问题,提高农业抵御与自然灾害和综合生产能力,全面推进乡村振兴、加快农业水利强省
日前,辽宁省人民政府办公厅关于印发《辽宁省促进人工智能创新发展实施方案》的通知,通知指出,发挥辽宁城市群和产业集群优势,因地制宜打造智慧产业园区,建设地市级人工智能赋能中心。鞍山、本溪、辽阳、盘锦、葫芦岛等市围绕智慧钢铁、智慧矿山、数智油田、智慧化工等打造应用场景示范;阜新、铁岭
北极星售电网获悉,7月15日,河南省发展和改革委员会发布关于印发《河南省深化智慧城市发展推进城市全域数字化转型实施方案(2025—2027年)》(以下简称《方案》)的通知。《方案》指出,加强重点行业和区域碳排放监测分析,提升省能源大数据中心功能,支持建立多方参与的碳普惠机制,探索个人企业碳
北极星售电网获悉,7月16日,江苏南通市政府办公室关于印发南通市加快推进生产性服务业高质量发展行动方案(2025—2027年)的通知。文件明确,探索低碳节能服务发展路径。积极引进国内外权威认证组织在通设立分支(合作)机构,提供“一站式”涉碳类认证和咨询服务,推动重点产品碳足迹的国际衔接互认
记者16日从南方电网贵州电网公司获悉,今年1至6月,贵州绿电交易电量43.36亿千瓦时,同比增长224%,参与绿电交易的电力用户达703家,同比增长了7倍。近年来,贵州加快构建新型综合能源基地,有序发展风电、光伏等新能源产业,努力构建清洁低碳、安全高效的现代化能源体系。截至2025年6月底,贵州电网统
近期,多座储能电站获最新进展,北极星储能网特将2025年7月14日-2025年7月18日期间发布的储能项目动态整理如下:蓝晓科技陕西西安用户侧智慧储能项目正式投运7月11日,蓝晓科技用户侧智慧储能项目正式投运。该项目位于西安市高陵区渭阳九路999号蓝晓科技新材料有限公司园区内部。储能总装机0.875MW/1.7
随着户用光伏市场的发展节奏逐渐放缓,众多经销商开始积极探寻新的业务增长点,阳台光伏这一新兴领域由此进入了大家的视野。国内的阳台光伏市场已得到越来越多的关注,呈现出加速崛起的态势。那么,这一市场具有哪些特点呢?商用场景为主,大功率需求显著从已安装的一些项目来看,国内阳台光伏的主要应
当前,我国现有工业园区数量超1.5万个,国家级和省级园区超过2500个,贡献了全国工业产值的50%以上,碳排放量占全国总量的30%以上。作为产业聚集的载体,零碳园区对美丽中国建设和“双碳”目标实现有着重要意义。7月8日,国家发改委、工信部、国家能源局联合发布《关于开展零碳园区建设的通知》,明确
对于全部上网电量即将参与市场交易的分布式光伏,存量和增量项目要区别看待。(来源:微信公众号“黄师傅说电”)存量项目,全额(多数地区)纳入机制电量,而且同地区单个市场主体的实时交易均价与整个地区同类项目的实时交易均价不会相差太大,虽然在新政下收益虽然会被拆分成场内的实时价格结算和场外
近日,浙江省多部委联合印发《浙江省海上风电安全应急管理指导意见》,详情如下:省自然资源厅、省生态环境厅、省建设厅、省交通运输厅、省海洋经济厅、省国资委,省气象局,宁波、温州、嘉兴、舟山、台州市发展改革委(能源局)、应急局,浙江海事局所属各分支局:为贯彻落实省政府关于海上风电“加强
2025年7月9日,湖南省娄底市双峰县100MW/200MW电网侧集中储能电站EPC工程项目在青树坪镇人和村举行了盛大的开工仪式,标志着双峰县在能源存储与优化领域迈出了重要一步,对当地乃至整个区域的能源格局都将产生深远影响。该项目建设单位为鹏辉力赫(天津)能源科技有限公司,施工单位则是实力雄厚的中建
北极星售电网获悉,7月15日,河南省发展和改革委员会发布关于印发《河南省深化智慧城市发展推进城市全域数字化转型实施方案(2025—2027年)》(以下简称《方案》)的通知。《方案》指出,加强重点行业和区域碳排放监测分析,提升省能源大数据中心功能,支持建立多方参与的碳普惠机制,探索个人企业碳
今年3月,国家发展改革委等四部门联合印发《关于公布首批车网互动规模化应用试点的通知》,正式确定上海市、常州市、广州市等9个城市为首批试点城市,同步公布30个试点项目。《能源评论》派出多路记者,前往济南、成都、广州、深圳等地,实地探访车网互动项目,了解规模化试点的进展。在济南,我们来到
北极星储能网获悉,7月16日,重庆市经济和信息化委员会正式对外发布重庆市培育新能源汽车动力电池回收利用产业工作方案(2025—2027年)》。根据方案,到2027年,全市动力电池回收利用产业体系基本健全,产业生态持续优化,初步建成西部领先的新能源汽车动力电池回收利用产业基地。新能源汽车动力电池
为了推动建立符合内蒙古产业发展特色的产品碳足迹标识认证制度,内蒙古自治区人民政府办公厅日前发布了《关于推进产品碳足迹标识认证工作的实施意见》(以下简称《实施意见》)。《实施意见》指出,内蒙古将以市场需求迫切、减排贡献突出、产业链供应链带动作用明显的产品为重点,在电解铝、纺织品(山
对光伏人来说,2025年又是一个让人心惊肉跳的5·31。2018年的5·31,因为累计20年待支付光伏发电补贴费用超过1万亿元,中央政府对光伏新建项目急刹车。在政策的影响下,光伏装机容量装机大跌、产业链大量企业倒逼,投资商资金链断裂。这段光伏项目业主和光伏产业链上生产企业遭受灭顶之灾的历史,让广
7月18日,在第三届中国国际供应链促进博览会上,星巴克中国宣布与全球领先的绿色科技企业远景科技集团达成战略合作。未来三年,双方将在现有绿色门店和低碳咖啡烘焙产业园的合作基础上,基于方舟能碳管理系统,共同构建星巴克中国供应链碳管理平台,逐步覆盖星巴克中国100%的直采供应商和重要的间接采
2025年11月24-26日,深圳会展中心(福田)将迎来三场国家级环境领域盛会——第三届深圳国际生态环境监测产业博览会(EMIE2025)、深圳国际水务科技博览会(IWTE2025)、国际(深圳)环境技术交流与转移博览会(环交会),三展首次同期同地举办,形成“技术研发-应用落地-国际转移”全产业链闭环,为全球生态环境
近日,海辰储能厦门总部基地工厂与重庆基地工厂双双入选2025年度先进级智能工厂榜单。这一殊荣不仅是对两座工厂在制造高端化、智能化、绿色化发展成果的权威认可,更标志着海辰储能以“智造”为引擎,持续夯实储能新质生产力根基,助力新型储能制造业高质量发展。双厂入选,海辰储能以数智化重构制造竞
只需“刷个脸”,不到10秒,巡检人员就能精准拿到或归还无人机装备。7月8日,国网江苏无锡供电公司建成投运智能无人机库房。该库房充分利用“人脸识别+RFID(射频识别)”技术,将单次设备领用或归还流程平均耗时从2分钟缩短至10秒内,效率提升10倍以上,为输电线路高效运维筑牢了智能安全屏障。长期以
500多家展商800个展位30,000平米展出面积35,000名专业观众一、展会概况深入贯彻落实习近平总书记关于水旱灾害防御和水利基础设施建设的重要指示批示精神,着力推动解决农业小型水利设施老化、塘坝淤塞严重、水渠不畅等问题,提高农业抵御与自然灾害和综合生产能力,全面推进乡村振兴、加快农业水利强省
日前,辽宁省人民政府办公厅关于印发《辽宁省促进人工智能创新发展实施方案》的通知,通知指出,发挥辽宁城市群和产业集群优势,因地制宜打造智慧产业园区,建设地市级人工智能赋能中心。鞍山、本溪、辽阳、盘锦、葫芦岛等市围绕智慧钢铁、智慧矿山、数智油田、智慧化工等打造应用场景示范;阜新、铁岭
北极星售电网获悉,7月15日,河南省发展和改革委员会发布关于印发《河南省深化智慧城市发展推进城市全域数字化转型实施方案(2025—2027年)》(以下简称《方案》)的通知。《方案》指出,加强重点行业和区域碳排放监测分析,提升省能源大数据中心功能,支持建立多方参与的碳普惠机制,探索个人企业碳
北极星售电网获悉,7月16日,江苏南通市政府办公室关于印发南通市加快推进生产性服务业高质量发展行动方案(2025—2027年)的通知。文件明确,探索低碳节能服务发展路径。积极引进国内外权威认证组织在通设立分支(合作)机构,提供“一站式”涉碳类认证和咨询服务,推动重点产品碳足迹的国际衔接互认
走进山东能源兖矿智慧制造园区,一栋栋标准化厂房拔地而起,道路两旁的微风发电智慧路灯随风转动,抬眼望去,阳光穿透薄云,洒在成片的深蓝色光伏阵列板上,整个光伏矩阵泛起粼粼波光,从对山林时序的尊重敬畏,升华为对自然节律的精准驾驭。作为山东省重点项目,兖矿智慧制造园区正以绿色低碳发展为引
北极星储能网在天眼查获悉,7月15日,国峰(深圳)软件开发有限公司成立,注册资本5,000万人民币,法定代表人为刘锐。经营范围包含新兴能源技术研发;储能技术服务;软件开发;软件销售;技术服务、技术开发、技术咨询、技术交流、技术转让、技术推广;发电技术服务;电力行业高效节能技术研发;技术进
2024年10月,国家发改委副主任在新闻发布会上表示,未来五年需要改造的城市燃气、供排水、供热等各类管网总量将近60万公里,投资总需求约4万亿元。旨在加强城市基础设施建设,特别是抓好城市地下管网等“里子”工程建设,加快补齐城市安全韧性短板,打造宜居、韧性的智慧城市。作为管网领域权威的产品
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!