登录注册
请使用微信扫一扫
关注公众号完成登录
我要投稿
啥是大数据?咋处理?有啥难?
据朱文武介绍,现在处于人机物的时代,一方面无所不在的计算成为可能。另一方面设备的小型化,带来了设备的无所不在。设备的无所不在、网络的无所不在、计算的无所不在,导致了数据产生的速度发生了爆炸性的增长。
据介绍,大数据一部分来自网络世界,一部分是物理世界,一部分来自于人。互联网将人与设备联系起来,从而记录人类在虚拟世界的很多数据,例如每天百度会产生300PB的数据要处理 ,脸书有10亿用户。同时,物联网则通过各种各样的传感器、湿度、温度,记录物理世界的发展。
朱文武预计,随着互联网 、物联网和社交网络的发展,预计到2020年将有40ZB的数据可供记录。
大数据时代到来也会带来很多挑战,包括数据量巨大和处理及时有效性、真实性等问题。
据介绍,数据量非常大、种类非常多。“数据里面有语音、文本、图片、视频等等,给处理带来了很多挑战。并且数据的变化很快,如何保证及时有效性、真实性?”此外,数据真实性和可靠性也是一个挑战。在互联网里面,数据如果不真实,将导致分析走向错误的方面。
此外,还有系统方面的挑战,怎么样联合优化存储;还有计算,还有网络通讯,产生新的大数据的系统,这也是一个学术界大家讨论的一个问题。
“为什么大数据是一个挑战,实际上是因为绝大多数的数据是没用的,要在这些数据里面大海捞针,把有用的东西找出来,找的时候你把数据都要放进来,所以在大数据的应用里面,一个很大的问题就是怎样把数据进行非常有效的采集存储,即使有些数据无用、无效,或者是不真实,也要能够及时地存入,以后慢慢消化,这就是我们的工作解决的一个技术难题。”微软亚洲研究院院长刘震说。
便民应用、工程问题、日常生活都与它相关
开发各类便民应用
微软亚洲研究院院长刘震认为,大数据对正在建设智慧城市的青岛来说,最大助力就是提供了以数据为驱动来进行决策的方式。
刘震认为,城市就是一个大数据,在大数据时代管理一个城市,就是把数据有效地利用起来。利用前提就是采集,在各行各业包括空气质量检测、食品安全、旅游景点等,都是采集来源,再处理后可提高服务质量。
刘震表示,以美国数据分析为例,工业数据、政府数据最多。政府数据完全可以无条件无权限地开放给各行各业,开放给市民。基于这些数据,可以开发各种应用。
“比如,下雪了,可以利用应用问一下,小孩的学校是不是关门?能够马上获得回复,今天学校关门。”刘震举例说,“答案从哪儿来呢?一个根据你所在位置,另一个则根据相应网站公开数据学校是否开门。”
“有了大数据以后,看怎么样在分析的时候,能够跨领域,把不同领域的数据关联起来,得到新的价值,这是新的趋势和要求。”刘震说。
以前段时间发生的踩踏事件为例,采用大数据处理的话就可以避免。刘震举例说,假设有一个智能旅游的应用,可以看各个景点的人数。再有一个应用是紧急事故处理,根据不同的标准,根据一个地方规定人的密度是多少等硬性指标。假如能够结合起来,把智慧旅游和紧急事故处理的应用结合起来,就可以产生预警等。智慧城市就是通过及时的事态的感应和跨领域的分析,可以能够建立起来的。“在分析数据上,每投入1美元,可收获10.66美元的回报。”刘震说。对此,记者也转算了下,发现相当于投入1块钱回报11块钱。
解决复杂工程设备中隐藏的问题
在大数据采集来源中,工业数据占有很大一部分。而青岛作为一个工业发达城市,大数据的应用将在工业生产中带来不少益处。
清华大学数据科学院副院长软件学院党委书记兼副院长王建民表示,今天产品的设计、制造、维护和再利用,已经不仅仅是在一个企业,而是一个产业链。以小米为例,大数据可以让更多市民参与产品设计。目前,青岛不少制造企业,大量的机器换人,机器换人有什么样的好处?能够采集更多的数据。而在数据分析基础上可以提高效率,可以保证产品质量。
王建民举例,大数据为复杂装备的故障分析提供新的手段,以工程器械中的油缸为例,如果主油缸泄露了,将造成泵车打泵很慢。如果油缸内泄,维修工现场无法判断,而通过数据分析就能找到毛病。王建民揭秘,通过大量故障车辆的数据统计,然后再看车和工况有什么样的特点,就能知道和什么样的毛病紧密相关。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
日前,贵州省人民政府关于印发《贵州省落实以人为本的新型城镇化战略五年行动计划实施方案(2024—2028年)》的通知。文件提出,推动能源化工、大数据等产业积极参与绿色电力交易。实施5G网络加密行动,实现5G网络城区连续覆盖和重点场所深度覆盖,推动北斗应用融入城市建设管理,到2028年累计新建5G基
作为全球最大、影响最广的消费类电子技术年展,美国拉斯维加斯消费电子展(CES)2025于当地时间1月7日开幕(北京时间1月8日)。海信以“AIYourLife”为主题,携智慧生活、智慧能源、汽车电子、网络信息等产业集群和业务板块参展,全方位展示了海信在人工智能领域的最新突破与成就。科林电气作为海信智
有多硬核?2024年第七届数字中国建设峰会中获评“十大硬核科技”如何助企业降本增效?数据感知、存储和计算分析落地应用有何作用?减排温室气体,改善空气质量,提升居民生活质量长期以来,各类社会公共基础设施自建平台、各自独立布置终端的烟囱效应成为智慧城市发展的瓶颈。智慧城市,必须万物互联。
中秋节临近,家住安徽合肥的吴先生开着新能源汽车准备回老家涡阳过节。虽然自己的新能源车买了几年了,但以往回涡阳老家,都是借朋友的油车回去,因为老家的新能源车的充电站少,充电要排很长时间的队。现在好了,父母所住小区的旁边就新建了新能源车充电站,通过“网上国网”APP就能查询附件空闲枪机
近日,常州市钟楼区上书房社区入选“2023年绿色低碳典型社区”。社区下辖的金谷花园“智慧能源系统”成为老小区改造的一大焦点。该系统由亚玛顿全程设计与制造,包括光储充一体化系统和光伏发电自发自用系统。BIPV创新技术结合光伏的公共设施和生活用品,绿色低碳的同时更加智能和便民。该项目主要由:
日前,国家发展改革委、国家数据局、财政部、自然资源部发布《关于深化智慧城市发展推进城市全域数字化转型的指导意见》(以下简称《意见》)。就进一步推进城市数字化转型、智慧化发展,提升城市治理体系和治理能力现代化指明了方向。国家发展改革委国家数据局财政部自然资源部关于深化智慧城市发展推
近日,北极星水处理网获悉,泉州水务集团权属一级企业泉州城市运营有限公司揭牌仪式在泉州农商银行大楼举行。市政府副秘书长刘云峰,市国资委党委委员、四级调研员周俊杰,市城市管理局党组成员、总工程师王森江出席仪式,泉州水务集团领导班子成员、各部室负责人、权属一级企业主要负责人以及泉州城市
国家数据局就《深化智慧城市发展推进城市全域数字化转型的指导意见》向社会公开征求意见。指导意见提出,深入实施城市云网强基行动,加快建设新型广播电视网络,推进千兆城市建设,探索发展数字低空基础设施。统筹推进城市算力网建设,实现城市算力需求与国家枢纽节点算力资源高效供需匹配,有效降低算
为打造支撑广州从“数字政府”全面向“智慧城市”发展的智慧城市基础设施体系,构建智慧城市产业生态,促进数字经济、数字政府、数字社会建设三位一体深度融合,同意广州智慧城市基础设施建设(一期)项目建设。项目租赁现有建筑42000平方米。建设内容共六个部分,一是通信网络基础设施,包括城域专网
11月23日,以“竞放数字力量”为主题的2023第八届IDC中国数字化转型年度盛典隆重举办,并举办了2023IDC中国未来企业大奖颁奖典礼。由商汤科技技术赋能的“上海市金山区AI鑫眼平台”、“基于云边协同的配网无人机智能巡检系统”、“中联重科AI视觉分析平台”获得2023IDC中国未来企业大奖优秀奖。其中,
在23日举行的2023全球数字经济标杆城市建设新闻发布会上,北京市朝阳区副区长舒毕磊表示,今年以来,朝阳区深入实施“商务+科技”双轮驱动发展战略,以朝阳园体制机制改革为契机,着力重构科技创新体系,全面提升数字经济核心区创新能级,以数实融合推进区域经济高质量发展。朝阳区支持北京国际大数据
近日,南方能源大数据中心与南方电网大湾区数字产业基地顺利投产,标志着南方电网公司基本建成“3+1+X”架构的绿色节能新型数据基础设施。南方能源大数据中心位于全国一体化算力网络国家枢纽节点贵州(贵安)枢纽,首期规划建成两栋机楼及一栋运检楼,承载约2000架10千瓦机柜,定位南方电网公司双活生
日前,南方能源大数据中心与南方电网大湾区数字产业基地分别在贵州贵阳、广东惠州投产,标志着南方电网公司基本建成“3+1+X”架构的绿色节能新型数据基础设施,有力展示公司主动融入国家“东数西算”工程建设,加快数字化转型和数字电网建设,加快向数字电网运营商、能源产业价值链整合商、能源生态系
问:您常年从事汽车相关教学工作,对新能源汽车行业的发展较为关注。随着新能源汽车越来越普及,我国充电基础设施也在快速发展,您对此有何看法?杨金龙:近年来,我国新能源汽车行业发展迅猛,充电基础设施建设也取得了令人瞩目的成绩。在我所生活的浙江省杭州市桐庐县,无论是旅游景区还是公共停车场
国家电网有限公司大数据中心深入贯彻落实国家电网有限公司第四届职工代表大会第五次会议暨2025年工作会议精神,牢牢把握“强化企业级统筹”“深化数字赋能赋效”“强化人工智能应用”“加强自主运维”四个方面要求,激活数据要素价值,全力支撑健全完善数字化工作体系、构建新型电力系统、发展新质生产
近日,四川能源监管办发布2024年度煤电机组大数据监管情况通报。通报指出,四川燃煤发电持续发挥“关键少数”重要作用,煤电兜底保障基础不断夯实,顶峰保供能力进一步发挥,企业经营情况进一步改善。全年枯水期完成发电量335.03亿千瓦时,提供了四川主网三分之一以上电量。2024年四川燃煤火电机组平均
2月17日,山东淄博供电公司电力气象智慧预警大数据应用平台上线。该平台深度融合电力数据和气象数据,增强了电力气象灾害的主动预警能力,为淄博电网防灾减灾、安全稳定运行提供保障。强风、雷暴等恶劣天气容易影响电网设备安全运行。为此,淄博供电公司与山东省电力气象技术创新中心联合组建攻坚团队
近日,福建龙岩供电公司发布龙岩市开工生产分析报告。此报告基于多维度与海量数据统计分析,详细呈现了各行业的生产经营变化情况,为政府精准制定政策、推动经济稳健复苏提供了数据支撑。该公司广泛收集企业开工生产相关数据,通过设定复工及达产指数,量化评估企业开工水平及达到正常生产用能水平情况
近日,福建龙岩供电公司发布龙岩市开工生产分析报告。此报告基于多维度与海量数据统计分析,详细呈现了各行业的生产经营变化情况,为政府精准制定政策、推动经济稳健复苏提供了数据支撑。该公司广泛收集企业开工生产相关数据,通过设定复工及达产指数,量化评估企业开工水平及达到正常生产用能水平情况
近日,由国网湖南省电力有限公司牵头,中国南方电网有限责任公司、中国长江三峡集团有限公司、华中科技大学、湖南大学和华为技术有限公司等共同编写的水电物联网国际标准IEEEStd2413.3-2024《水电能源物联网导则》正式获批发布。据介绍,在水电能源物联网领域,尤其是在水利水电工程中,数据壁垒易导致
2025年春节,浙江的大街小巷满是烟火与欢笑,当古镇的红灯笼与现代化都市的霓虹一同点亮新春夜空,你是否想过,这背后的用电数据是怎样的经济密码?它们串联起千家万户的团圆,映射出产业发展的新态势。现在,就跟着小e,看看2025年春节浙江用电数据藏着哪些惊喜。刚刚过去的春节(1月28日-2月4日),
正月初九,尽管春节假期已经结束了,但过年的热闹劲儿还未完全消散。2024年12月,中国春节成功列入《人类非物质文化遗产代表作名录》,紧接着,我们迎来了意义非凡的第一个“非遗版”春节。办年货作为春节里必不可少的仪式,承载着我们对新年的期待与祝福。当年轻一代逐渐接过年货采购的接力棒,又是什
3月11日,华旺(青岛)能源科技有限公司氢能单车采购项目招标公告发布,项目拟采购1000辆。招标公示如下:
北极星环境修复网获悉,青岛市上合示范区临海片区综合整治与产业融合发展EOD项目二期(南地块)设计采购施工总承包招标,本项目总投资454217.14万元,工程造价为93341.87万元,总工期446日历天,招标详情如下:
“通过三维建模技术,我们提前发现并处理隐患26处,故障抢修平均时长缩短到23分钟。”3月5日,在山东青岛莱西果蔬基地种植园区,前来巡检的国网青岛供电公司运维人员说。该公司安排了6架搭载红外测温仪的无人机,每周对种植园区的排灌线路进行立体巡检。眼下正值春耕春灌关键期。国网青岛供电公司以数
北极星储能网获悉,3月3日,国家市场监管总局发布2025年2月17日-2月23日无条件批准经营者集中案件列表,共有12个案件获批,中国第一汽车股份有限公司收购力神(青岛)新能源有限公司股权案就在其中。这就意味着中国一汽收购青岛力神事宜再进一步。据了解,青岛力神成立于2011年11月25日,曾用名“青岛
北极星电力网获悉,近日,大唐青岛天然气热电联产项目可行性研究报告审查会召开。项目可研开展外部审查工作,标志着大唐青岛天然气热电联产项目取得阶段性进展。该项目位于胶州湾大桥青岛登陆点东南侧装机,规模为4台9F级燃气-蒸汽联合循环热电联产机组,一期建设2台燃机+2台汽机,单机容量340.08MW燃
华电青岛发电有限公司2号机组汽轮机切缸改造项目招标公告(招标编号:CHDTDZ001/23-QT-1820)一、招标条件华电青岛发电有限公司2号机组汽轮机切缸改造项目项目已批准,招标人为华电青岛发电有限公司,项目资金为自筹。本项目已具备招标条件,现进行公开招标。二、项目规模和招标范围2.1招标采购项目地
2月4日至9日,山东青岛出现寒潮,青岛供电公司新上线的电力气象分析工具精准预警了天气变化情况,为保供电工作提供了有力支持。电力气象分析工具基于企业级气象数据服务中心打造,集成了市县天气信息服务、实时天气监测与预报、历史气象数据对比分析、重要场所气象查询等功能。应用该工具,电网运维人
·与北辰循环签署战略合作协议,共建青岛市退役动力电池数智化低碳循环利用体系·北辰循环成为“西门子中国零碳先锋伙伴成员”西门子今天与北辰先进循环科技(青岛)有限公司(以下简称“北辰循环”)签署战略合作协议,双方将携手打造青岛市退役动力电池数智化低碳循环利用体系样板工程,致力于建设零
“水资源正效益(WaterPositive)”是指企业、组织或项目向社区和自然环境返还的水资源量超过其自身运营所消耗的水量。以下是关于“水资源正效益”的一些信息:意义-应对水资源短缺:随着人口增长、气候变化和经济发展,水资源短缺问题日益严峻。实现水资源正效益有助于增加水资源供应,缓解水资源紧张局
2月11日,山东省政府印发《山东省深入落实区域协调发展战略深度对接京津冀和长三角行动方案(2025-2027年)》。《方案》提出,支持济南、青岛、淄博等市建设生态环保产业集群,打造一批生态环保产业特色园区。加强区域间碳排放数据质量管理合作交流,按照国家部署协同推进碳排放权交易市场建设,开展重
2月11日,青岛市固体废弃物处置有限责任公司中转站除臭及新风系统升级改造项目施工总承包中标结果公示。中建环能科技股份有限公司中标,投标报价:12897535.95元。
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!