登录注册
请使用微信扫一扫
关注公众号完成登录
我要投稿
啥是大数据?咋处理?有啥难?
据朱文武介绍,现在处于人机物的时代,一方面无所不在的计算成为可能。另一方面设备的小型化,带来了设备的无所不在。设备的无所不在、网络的无所不在、计算的无所不在,导致了数据产生的速度发生了爆炸性的增长。
据介绍,大数据一部分来自网络世界,一部分是物理世界,一部分来自于人。互联网将人与设备联系起来,从而记录人类在虚拟世界的很多数据,例如每天百度会产生300PB的数据要处理 ,脸书有10亿用户。同时,物联网则通过各种各样的传感器、湿度、温度,记录物理世界的发展。
朱文武预计,随着互联网 、物联网和社交网络的发展,预计到2020年将有40ZB的数据可供记录。
大数据时代到来也会带来很多挑战,包括数据量巨大和处理及时有效性、真实性等问题。
据介绍,数据量非常大、种类非常多。“数据里面有语音、文本、图片、视频等等,给处理带来了很多挑战。并且数据的变化很快,如何保证及时有效性、真实性?”此外,数据真实性和可靠性也是一个挑战。在互联网里面,数据如果不真实,将导致分析走向错误的方面。
此外,还有系统方面的挑战,怎么样联合优化存储;还有计算,还有网络通讯,产生新的大数据的系统,这也是一个学术界大家讨论的一个问题。
“为什么大数据是一个挑战,实际上是因为绝大多数的数据是没用的,要在这些数据里面大海捞针,把有用的东西找出来,找的时候你把数据都要放进来,所以在大数据的应用里面,一个很大的问题就是怎样把数据进行非常有效的采集存储,即使有些数据无用、无效,或者是不真实,也要能够及时地存入,以后慢慢消化,这就是我们的工作解决的一个技术难题。”微软亚洲研究院院长刘震说。
便民应用、工程问题、日常生活都与它相关
开发各类便民应用
微软亚洲研究院院长刘震认为,大数据对正在建设智慧城市的青岛来说,最大助力就是提供了以数据为驱动来进行决策的方式。
刘震认为,城市就是一个大数据,在大数据时代管理一个城市,就是把数据有效地利用起来。利用前提就是采集,在各行各业包括空气质量检测、食品安全、旅游景点等,都是采集来源,再处理后可提高服务质量。
刘震表示,以美国数据分析为例,工业数据、政府数据最多。政府数据完全可以无条件无权限地开放给各行各业,开放给市民。基于这些数据,可以开发各种应用。
“比如,下雪了,可以利用应用问一下,小孩的学校是不是关门?能够马上获得回复,今天学校关门。”刘震举例说,“答案从哪儿来呢?一个根据你所在位置,另一个则根据相应网站公开数据学校是否开门。”
“有了大数据以后,看怎么样在分析的时候,能够跨领域,把不同领域的数据关联起来,得到新的价值,这是新的趋势和要求。”刘震说。
以前段时间发生的踩踏事件为例,采用大数据处理的话就可以避免。刘震举例说,假设有一个智能旅游的应用,可以看各个景点的人数。再有一个应用是紧急事故处理,根据不同的标准,根据一个地方规定人的密度是多少等硬性指标。假如能够结合起来,把智慧旅游和紧急事故处理的应用结合起来,就可以产生预警等。智慧城市就是通过及时的事态的感应和跨领域的分析,可以能够建立起来的。“在分析数据上,每投入1美元,可收获10.66美元的回报。”刘震说。对此,记者也转算了下,发现相当于投入1块钱回报11块钱。
解决复杂工程设备中隐藏的问题
在大数据采集来源中,工业数据占有很大一部分。而青岛作为一个工业发达城市,大数据的应用将在工业生产中带来不少益处。
清华大学数据科学院副院长软件学院党委书记兼副院长王建民表示,今天产品的设计、制造、维护和再利用,已经不仅仅是在一个企业,而是一个产业链。以小米为例,大数据可以让更多市民参与产品设计。目前,青岛不少制造企业,大量的机器换人,机器换人有什么样的好处?能够采集更多的数据。而在数据分析基础上可以提高效率,可以保证产品质量。
王建民举例,大数据为复杂装备的故障分析提供新的手段,以工程器械中的油缸为例,如果主油缸泄露了,将造成泵车打泵很慢。如果油缸内泄,维修工现场无法判断,而通过数据分析就能找到毛病。王建民揭秘,通过大量故障车辆的数据统计,然后再看车和工况有什么样的特点,就能知道和什么样的毛病紧密相关。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
5月7日,赤峰市市场监督管理局发布《关于征集2025年国家、自治区标准化试点项目的通知》,通知指出,此次申报包含碳排放领域,在重点企业及园区开展碳排放管理体系、产品碳足迹、低碳、零碳园区标准化试点,探索节能降碳的标准化实施路径。内容如下:一、申报原则(一)公开自愿:试点项目面向社会公开
5月6日,湖南省发改委关于征集基础设施领域不动产投资信托基金(REITs)意向储备项目的通知。符合1014号文有关要求的项目均可申报,包括能源基础设施。包括风电、太阳能发电、水力发电、天然气发电、生物质发电等清洁能源项目;储能设施项目;清洁低碳、灵活高效的燃煤发电(含热电联产煤电)项目;特
北极星售电网获悉,4月20日,贵州六盘水市人民政府关于印发六盘水市发布关于深入推动城市公共交通事业高质量发展的实施方案的通知。文件明确,支持企业可持续发展。深化公共交通企业改革,推进创新发展,构建“公益性+市场化”新型公交运营模式,支持社会充换电、氢能充换气设施向公交车拓展,公交场
春和景明,万物竞发。在这欣欣向荣的日子里,首创环境环卫业务再度传来喜讯——成功中标乌鲁木齐市水磨沟区智慧城市平台(七、榆、石区域三)协同作业项目。此次项目服务范围覆盖七纺、榆树沟、石人子沟三大核心区域,服务内容为智慧城市平台精细化管理、道路全方位清扫保洁、高效除雪铲冰、垃圾科学分
北极星储能网获悉,4月29日,昇辉智能科技股份有限公司(以下简称“昇辉科技”)发布公告,拟通过发行股份收购赫普能源环境科技股份有限公司(以下简称“赫普能源”)85%股权并募集配套资金,剩余15%股权拟使用1.65亿元(暂定价)自有资金及/或自筹资金通过股份受让方式取得。此次收购旨在整合双方资源
北极星氢能网获悉,4月25日,中国天楹股份有限公司水电解制氢设备采购招标公告发布,开标时间为2025年5月16日。信息显示:中国天楹股份有限公司水电解制氢设备(80套)采购,对投标人要求为投标人必须至少具有6套水电解制氢成套设备(单套设备的制氢能力为1000Nm/h及以上)的供货合同业绩(以成套设备
在数字化浪潮席卷全球的今天,数据中心作为数字经济的核心引擎,其重要性日益凸显。科士达携手杭州钢铁集团有限公司(简称“杭钢集团”)合力打造杭钢云计算数据中心(以下简称“杭钢云”),以绿色节能、安全可信的数字经济基础设施,服务于工业互联网、智慧城市、政务云、金融科技等领域,提供云计算
近日,中电建南方、华东新华、青岛城投、广东建晟、水发绿色多个新能源岗位招聘,北极星整理如下:中电建新能源集团股份有限公司(简称:电建新能源集团)成立于2021年12月,是大型央企中国电力建设股份有限公司(简称:中国电建)的重要子企业,主要从事以新能源为主的清洁低碳能源项目的投资开发和运
4月11日,南宁市人民政府关于印发南宁市支持中国—东盟人工智能创新合作中心高质量发展第一批政策措施的通知(南府规〔2025〕4号)。其中明确支持智算算力建设。鼓励各类社会主体投资建设智算中心为南A中心提供算力服务,对规模达到100PFlops以上的新建项目,在用地保障、项目审批、资金申报、用能需求
北极星售电网获悉,3月31日,辽宁沈阳市人民政府发布关于印发沈阳市促进民间投资高质量发展若干政策举措的通知。文件明确,引导民间投资参与清洁能源及绿色低碳领域建设。鼓励民间投资加大对生物质发电、风电、新型储能、氢能、源网荷储一体化等清洁能源领域的投资力度。支持民营企业参与氢能装备、先
4月2日,中国能建党委书记、董事长宋海良,党委副书记、总经理倪真在重庆拜会中央政治局委员、重庆市委书记袁家军,重庆市委副书记、市长胡衡华,并见证重庆市人民政府与中国能建签署战略合作框架协议。双方表示,要深入学习贯彻落实习近平总书记视察重庆重要讲话重要指示精神,深化能源电力、智慧城市
5月9日,上汽集团旗下移动出行战略品牌——享道出行,宣布完成超13亿元人民币C轮融资,成为国内出行行业近三年来单笔融资金额最大的一次融资,在网约车市场投下了一枚重磅炸弹。自2018年成立以来,享道出行已构建起覆盖网约车、企业用车、个人租车和出租车的全场景智慧出行综合体。依托上汽集团的优势
“没想到分布式光伏出力预测准确率这么高,让我们提前采取管控措施,避免了二道沟1号台区出现反向重过载。”5月6日,冀北张家口崇礼区供电公司太子城供电所副所长张昭隆说。几天前,张家口供电公司部署的分布式光伏运行状态预测微应用发出预警:二道沟1号台区分布式光伏设备将在未来三天内出现光伏大发
人工智能加速新型电力系统构建的实践与思考——以华为数字解决方案为例杨永明(中能传媒能源安全新战略研究院)当前,人工智能(AI)已成为经济增长的新引擎,深刻改变着各行各业的运作方式。在能源电力行业,随着通用算力的飞速发展、算法模型的不断进化和行业数据的不断积累,AI技术的应用已深入到多
在“双碳”目标与新能源革命的双重驱动下,中国电力系统正经历百年未有之变局。当风电、光伏装机占比突破35%,传统电网的调度瓶颈与新能源消纳矛盾日益尖锐,一种名为“虚拟电厂”的新型电力组织模式正从实验室走向规模化落地。国家能源局最新数据显示,2025年我国虚拟电厂调节能力将突破5000万千瓦,
近日,国能日新自研「旷冥」大模型完成了自正式发布以来的首次迭代升级,迎来了「旷冥」2.0版本。本次升级,除了对模型稳定性和整体性能进行优化,更是在技术层面全效升级。首先在大模型技术方面,创新采用了多维度patching注意力机制架构,并显式嵌入了平流、对流方程,构建物理驱动的深度神经网络模
当地时间5月7日,2025年德国慕尼黑光伏储能展览会(IntersolarEurope)在慕尼黑新国际展览中心盛大启幕。作为全球太阳能领域规模最大的顶级盛会,此次展会吸引了超3000家国际企业参展。首航新能源再启海外追光之旅,携重磅新品及全场景智慧光储解决方案闪耀亮相展会,与来自全球同行伙伴及客户共同探索全
“五一”假期期间,在河北省永清县圆通速递北方总部基地二期项目内,30条全自动分拣线高速运转。恰逢换季与出行游玩高峰期,消费者频繁网购服装、出行装备等商品,这几日,圆通速递北方总部基地的日均操作量高达550万件。“自去年底全自动分拣线投产以来,我们快递的日处理能力提升至1000万件,产能和
近日,国能日新自研「旷冥」大模型完成了自正式发布以来的首次迭代升级,迎来了「旷冥」2.0版本。本次升级,除了对模型稳定性和整体性能进行优化,更是在技术层面全效升级。首先在大模型技术方面,创新采用了多维度patching注意力机制架构,并显式嵌入了平流、对流方程,构建物理驱动的深度神经网络模
5月7日,赤峰市市场监督管理局发布《关于征集2025年国家、自治区标准化试点项目的通知》,通知指出,此次申报包含碳排放领域,在重点企业及园区开展碳排放管理体系、产品碳足迹、低碳、零碳园区标准化试点,探索节能降碳的标准化实施路径。内容如下:一、申报原则(一)公开自愿:试点项目面向社会公开
北极星储能网获悉,5月7日,内蒙古自治区工业和信息化厅发布关于征集2025年度工业和信息化领域节能降碳技术装备的通知,征集范围包括高效储能、工业绿色微电网等可再生能源消纳技术。原文如下:关于征集2025年度工业和信息化领域节能降碳技术装备的通知各盟市工业和信息化局,有关科研单位院所、行业协
北极星售电网获悉,4月30日,浙江电力市场管理委员会印发《浙江省虚拟电厂运营管理细则(试行)》,首次系统规范虚拟电厂主体注册、能力认证、变更退出等运营管理全流程,《细则》共11章49条内容,明确了虚拟电厂的定义、准入条件、运营规则及责任分工,构建了涵盖注册接入、能力认证、市场交易、保供
今年全国两会是在“十四五”规划收官之年召开的重要会议,对于全面建设社会主义现代化国家具有重要意义。今年的政府工作报告提出,“协同推进降碳减污扩绿增长,加快经济社会发展全面绿色转型”,深刻揭示了新型能源体系在经济社会高质量发展中的重要地位。党的十八大以来,习近平总书记提出“四个革命
北极星储能网获悉,5月9日,联特云储(青岛)智能科技有限公司青岛莱西市储能电站示范项目工程总承包(EPC)中标结果公示,项目招标人为联特云储(青岛)智能科技有限公司,建设使用磷酸铁锂电池的100MW/200MWh储能电站,中国电建集团江西省电力设计院有限公司、东方旭能(山东)科技发展有限公司、广西民
5月8日,青岛啤酒(成都)有限公司与成都市温江城投顺源生态环境建设有限公司在成都市温江区人民政府会议室正式签署废水价值共享项目合作协议,温江生态环境局、温江区水务局相关负责人出席并见证签约仪式。政策创新啤酒企业生产废水具有高浓度有机物、无毒害、可生化性极好的特点,其含碳量可成为污水
北极星储能网获悉,4月29日,青岛瑞海新能科技有限公司、中瑞智投等在山西阳泉市城区签订鑫能晋合独立混合储能项目合作框架协议。该项目为200MW/101.1MWh新型储能调频项目,预计总投资约8亿元,拟采用飞轮储能技术实施。
“一分钱”提质增效专项工作,是国家电投集团以高质量发展为主线,以提升经营利润为目标,以降低度电成本为核心提出的一项重要工作部署。国家电投集团系统上下向成本要效益,向内部挖潜力,推出赛马机制赛成绩晒成果,开展专项劳动竞赛比学赶超全方位提高价值创造能力。实践证明,“一分钱”蕴含“高质
北极星储能网获悉,5月7日,青岛市发展和改革委员会发布青岛市新能源产业发展路径及政策研究竞争性磋商公告,预算金额64.8万元,重点围绕风电、光伏、氢能、储能、核能、地热能、生物质能、海洋能等新能源产业八大领域进行系统研究,形成《青岛市新能源产业发展路径及政策研究》课题研究主报告,并围绕
北极星太阳能光伏网获悉,2025年4月22日,青岛盛隆新能源有限公司正式注册成立,注册资本100万元,法定代表人为虞立涛,公司位于山东省青岛市即墨区,经营范围包含发电技术服务、储能技术服务、合同能源管理、工程管理服务、光伏发电设备租赁、太阳能发电技术服务、风力发电技术服务、电动汽车充电基础
5月7日,科林电气一季度销售工作会在科林产业园隆重召开。科林电气副董事长史文伯,总裁王永等公司主要领导与全国三百余名销售精英齐聚一堂,全面总结一季度销售战绩,部署下一阶段战略规划,凝心聚力共绘发展新蓝图。科林电气紧跟市场趋势,精准把握市场脉动,取得了粲然可观的成绩。会议中,深度解析
北极星储能网获悉,5月6日消息,艾罗能源披露股东减持股份计划公告。公司股东青岛金石、长峡金石及上海中电投计划在2025年5月27日至8月26日通过集中竞价或大宗交易分别减持不超过800,000股、800,000股和1,600,000股,占公司总股本的0.50%、0.50%和1%。上述三股东拟减持持股份来源均为IPO前取得,同时,
日前,2025年青岛环保蜂窝式催化剂生产项目非电脱硝催化剂、平板式催化剂生产项目板式脱硝催化剂2个标段中标公示。
北极星氢能网获悉,近日,青岛康普顿科技股份有限公司发布关于控股子公司青岛氢启新能源科技有限公司(简称“氢启科技”)对外投资进展暨注销其全资子公司氢启(淄博)新能源科技有限公司(简称“氢启淄博”)的公告。公告显示,因市场环境的变化,同淄博市桓台县人民政府签署氢启燃料电池电堆项目投资
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!