登录注册
请使用微信扫一扫
关注公众号完成登录
我要投稿
物联网中设备记录文件(Machinelog)以及传感器产生的数据由装置层中的网关(Gateway)收集转换,经由网络传入位于云端或是企业内部私有云中的数据分析系统,数据分析的前端模块执行实时串流数据处理,由于每个单位时间都持续由装置层中分散的设备节点动态产生大量数据,因此前端模块必须具有实时接收处理串流数据的能力,此时数据可经由分散处理的分析引擎与分散储存的数据库达成计算资源动态规划支持。
在数据分析系统数据处理过程需进行数据清理(Datacleaning),异质性数据汇整等数据前处理工作(Datapre-processing),关于异质性数据分析将另以专文说明。这里可参考以下工作原则进行:
˙补足原始数据不完整的字段,如时间位置或说明。
˙过滤有错误的数据。
˙对数据的单位和坐标进行转换。
˙几种基本的分析模式也可以在此阶段运行,如加总、相关性。
˙同时生成并处理事件。这些结果倒入控制面板(Dashboard)以图像化的方式呈现给用户。
˙处理后的数据置于数据库中长期保存以利后续的进一步分析。较为复杂的预测建模(Predictiveanalytics)分析需要统计机率建模与机器学习,则采批次分析模块进行。
预测建模分析核心精神是基于统计模型的回归分析模式,采用大量历史数据提供建模,同时需要引入许多的外部数据,例如产业领域知识,供机器学习中特征工程(Featureengineering)使用。文字以及影像等非结构化数据特性则另外藉由特定模块处理,产生对应的半结构化数据(Semi-structure)以供后续建模所需特征工程使用。
目前物联网数据分析的来源数据可能包含厂房设备的状态,例如输入电流、震动,环境因素如温度、影像和语言文字,或是用户行为等在线的数据。同时导入多种外部讯息用以辅助数据分析,例如政府公开资料、天气温湿度、新闻事件、大众舆论、人机互动等交互使用。因此好的数据分析系统应具备以下几个重要特征:
在领域专家协助下,基于场景知识库建立需求,以规则与事例建构专家系统,以自动化的规则处理方法以汇整运用大量的知识。
统计专家结合领域知识对数据探索分析,然后进行特征工程抽取出适当的特征,导入机器学习,先进的非监督学习算法可以自动化分析得到带有最多信息量的特征,应用于预测建模过程特征工程使用。
机器学习:实作并整合各种算法,持续评估运算效能,以统计采样验证模型的精确度,自动化混合多种算法并且调整参数,达到优化的预测结果。
数据分析系统除了实作各种机器学习的算法,为了满足不同产业、不同场景或主题的物联网应用方案,还需要因不同产业或场景应用提出不同评估验证方式,以确保或提升各种预测建模方法的预测精确度和适用性现阶段期待一个数据分析与预测系统能够通用性地解决各行各业、个别厂商数据分析需求,例如:应用于在线串流数据实时分析、进而预测即将发生的设备异常状态诊断、或是产能设备参数优化以及客制化生产的配方提供,恐怕还需等若干年后数据分析方法有更突破性进展才有可能实现。因为单靠机器学习虽然可达到一定的效果,仍旧有学习成效上限存在,目前业界采用的方法是除了机器学习外,再搭配领域专家根据领域知识来制定相关有效的规则来辅助机器学习,或需数据科学家分析大量的数据后所得出的有用信息回馈给机器学习,以求达到更高效的均衡问题解决方案。
不少有志于物联网应用方案研发的厂商往往选择自行开发整体方案,宣称有能力自行建立数据分析/预测系统,往往做出来的数据分析系统只是最基本的统计分析,缺乏真正使得整个物联网应用方案"智能"的能力。
看了本文的说明后,往后需求方在评估上门推销的"智慧"物联网方案时,应该要询问方案提供厂商这些基本问题,才不致花钱买到不"智能"的物联网应用方案。至于有意投入开发物联网应用方案的厂商,最好在规划研发之初审慎思考是否有能力开发这个核心系统,否则就应该寻找优秀的数据分析/预测团队合作。
相关阅读:
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
近日,常州市钟楼区上书房社区入选“2023年绿色低碳典型社区”。社区下辖的金谷花园“智慧能源系统”成为老小区改造的一大焦点。该系统由亚玛顿全程设计与制造,包括光储充一体化系统和光伏发电自发自用系统。BIPV创新技术结合光伏的公共设施和生活用品,绿色低碳的同时更加智能和便民。该项目主要由:
日前,国家发展改革委、国家数据局、财政部、自然资源部发布《关于深化智慧城市发展推进城市全域数字化转型的指导意见》(以下简称《意见》)。就进一步推进城市数字化转型、智慧化发展,提升城市治理体系和治理能力现代化指明了方向。国家发展改革委国家数据局财政部自然资源部关于深化智慧城市发展推
国家数据局就《深化智慧城市发展推进城市全域数字化转型的指导意见》向社会公开征求意见。指导意见提出,深入实施城市云网强基行动,加快建设新型广播电视网络,推进千兆城市建设,探索发展数字低空基础设施。统筹推进城市算力网建设,实现城市算力需求与国家枢纽节点算力资源高效供需匹配,有效降低算
为打造支撑广州从“数字政府”全面向“智慧城市”发展的智慧城市基础设施体系,构建智慧城市产业生态,促进数字经济、数字政府、数字社会建设三位一体深度融合,同意广州智慧城市基础设施建设(一期)项目建设。项目租赁现有建筑42000平方米。建设内容共六个部分,一是通信网络基础设施,包括城域专网
11月23日,以“竞放数字力量”为主题的2023第八届IDC中国数字化转型年度盛典隆重举办,并举办了2023IDC中国未来企业大奖颁奖典礼。由商汤科技技术赋能的“上海市金山区AI鑫眼平台”、“基于云边协同的配网无人机智能巡检系统”、“中联重科AI视觉分析平台”获得2023IDC中国未来企业大奖优秀奖。其中,
在23日举行的2023全球数字经济标杆城市建设新闻发布会上,北京市朝阳区副区长舒毕磊表示,今年以来,朝阳区深入实施“商务+科技”双轮驱动发展战略,以朝阳园体制机制改革为契机,着力重构科技创新体系,全面提升数字经济核心区创新能级,以数实融合推进区域经济高质量发展。朝阳区支持北京国际大数据
政府和社会资本合作(PPP)实施近十年来,一定程度上起到了改善公共服务、拉动有效投资的作用,但在实践中也出现了一些亟待解决的问题。为贯彻落实党中央、国务院决策部署,进一步深化基础设施投融资体制改革,切实激发民间投资活力,现就规范实施政府和社会资本合作新机制(简称新机制)提出如下指导
9月11日,山东潍坊供电公司自主研发的“智慧城市电力大脑”平台上线运行。当日,该公司发展策划部综合统计分析专责通过“智慧城市电力大脑”平台中的“电力看经济”应用,监测分析全市及各县工业企业用电大户的日用电量情况,制作用电情况周报。周报将提交给潍坊市工业运行指挥部,帮助政府部门精准研
城市环境日新月异,城市景观精彩纷呈。7月12日,首届深圳(国际)城市环境与景观产业展览会于深圳会展中心启幕。本次城管展荟集国内外800余家环保从业单位及科研力量,充分展示“新时代深圳城市管理”、“城市环境卫生”建设试点先进适用技术、智慧环保等新实践应用案例。作为新时代中国城市美容师,盈
截至7月6日,上海浦东供电公司研发的电费测算功能模块已在智慧城市能源云平台及“掌上管家”两个应用上平稳运行一周。应用该模块,所有工商业大客户可享受及时精确的电费预测服务。电费测算功能模块涵盖电费预测、电力需求响应收益测算及用能策略推荐3项功能。除了预测电费数据,客户还能应用该模块查
北极星电力软件网获悉,6月13日,北京市经济和信息化局印发《关于实施十大强企行动激发专精特新企业活力的若干措施》(以下简称《措施》)的通知。《措施》指出,实施“场景育新”行动。围绕机器人、信创、氢能等前沿新兴领域,推动企业参与智慧城市场景创新开放建设,对专精特新企业参与创新技术突破
北极星储能网获悉,6月3日,内蒙古赤峰市能源物联网零碳氢氨一体化示范项目(翁牛特旗风电)公示环境影响评价征求意见稿。文件显示,建设于赤峰市翁牛特旗阿什罕苏木、乌敦套海镇。项目总装机容量为375MW,将安装60台6.25MW风电机组、60台箱变等附属设施,配建56.25MW/225MWh储能装置,新建220kV升压站
为贯彻落实党中央、国务院关于碳达峰、碳中和决策部署,推动能源生产和消费革命,扎实推进工业领域电力需求侧管理工作,我部在全国范围内开展相关参考产品(技术)征集工作。经地方工业和信息化主管部门初审、中国电力企业联合会组织专家评审及我部审核,拟将24项产品(技术)列入全国工业领域电力需求
5月9日,远景兴安盟能源物联网零碳氢氨项目获备案。公告显示,项目单位为远景绿色气体(兴安盟)有限公司,建设地点位于兴安盟—乌兰浩特市—内蒙古兴安盟经济技术开发区,总投资25亿元。远景兴安盟能源物联网零碳氢氨项目,项目占地约603亩,建设年产30万吨合成氨,新建电解水制氢装置、绿氢制合成氨
近日,电气与电子工程师协会(IEEE-SA)批准并正式发布了由四川长虹集团牵头制定的《基于区块链的物联网零信任框架标准》国际标准,该标准是首个基于区块链技术在物联网安全应用方面的国际标准,填补了IEEE-SA在区块链与物联网安全方面的国际标准空白。标准的成功研发历时近3年时间,四川长虹集团作为
近日,“基于云管边端架构的电力全域物联网技术研究与应用”项目顺利通过中国电机工程学会科技成果鉴定。由中国工程院院士李立浧担任鉴定委员会主任委员,鉴定委员会一致认为该项研究成果达到国际领先水平。该项目由输配电部统筹,广东电网公司电力科学研究院牵头负责,针对电力物联网数据、算法、安全
4月24日,国网天津电科院与河北区科技局开展天津市电力物联网重点实验室建设交流活动。河北区科技局调研组深入电科院电力人工智能实验平台、省级输电管控中心、电网材料性能检测平台等参观考察,了解各平台实验能力和业务开展情况。电科院实验室人员展示了机械臂带电更换绝缘子、输电通道监拍、一次设
4月15日,全国首个基于电鸿物联操作系统(以下简称“电力鸿蒙OS”)的输电智能运维场景在广东电网公司广州供电局500千伏从木丙丁线、110千伏科尖加石迁线等线路建成,这是“电力鸿蒙OS”发布以来首次在输电专业设备运维场景的工程化实践。输电线路及杆塔作为智能运维应用的重要场景,存在智能装备硬件种
近日,由国网区块链应用技术实验室建设运营的源网荷储数碳协同互动交易服务平台——“交易云”上线了绿电聚合、绿证聚合、电价预测、电碳抵扣等功能。实验室将依托该平台探索开展分布式绿证核发和交易代理,撮合各方主体开展绿证交易,推动分布式绿电聚合交易,助力提升可再生能源消纳能力。为贯彻落实
承接北京非首都功能疏解实现突破,高端高新产业加快落地,重大工程全面推进,现代化城市初具规模……七年奋斗,未来之城拔节生长。服务支撑高标准的城市规划蓝图变为高质量的城市发展现实画卷,一张世界一流电网与这座举世瞩目的城市共同成长。向上生长,星夜兼程,春日的雄安新区生机勃发。七年间,从
3月18日,市场监管总局会同中央网信办、国家发展改革委等18部门联合印发《贯彻实施〈国家标准化发展纲要〉行动计划(2024—2025年)》(以下简称《行动计划》),就2024年至2025年贯彻实施《国家标准化发展纲要》(以下简称《纲要》)提出具体任务,要求各地区各部门结合实际认真贯彻落实。2021年,党
2月20日,国网河南省电力公司组织新型电力系统配电物联领域标准宣贯培训交流活动,提升基层一线标准应用成效和标准化工作水平,助力配电网供电能力提升等工作高质量开展。近年来,国网河南电力建立健全科技搭台、专业主导、基层支撑、产业协作的四方协同科研体系,推进技术标准体系与科技创新体系紧密
夏日光盈,启航SNEC光伏展六月和风,翠绿如茵一场令人激动的绿色之旅近在眼前!6月13日-15日2024SNEC光伏展即将在国家会展中心(上海)举办届时,莱姆将在6.1H-E560展位呈现LZSR、LWSR、HMSR、DCBM等多款应用于新能源行业的绿色传感器和智能表计及创新技术解决方案在此,莱姆诚挚欢迎各位新能源业界朋
南方电网公司2024年数字变电站、数字输电和智能配电系列传感终端以及北斗终端第一批框架招标项目中标结果公告(招标编号:CG2700022001722327)
为贯彻《中华人民共和国环境保护法》,规范生态环境监测工作,生态环境部近日发布国家生态环境标准《水质水温的测定传感器法(征求意见稿)》公开征求意见,各机关团体、企事业单位和个人均可提出意见和建议。请于2024年4月22日前将意见建议书面反馈生态环境部,并注明联系人及联系方式,电子文档请同
1月5日,山东莱芜供电公司联合山东电力科学研究院完成220千伏长勺变电站1号主变压器内置特高频监测系统的传感器首次校验,标志着山东首套220千伏变压器内置特高频局部放电监测系统投入运行。目前广泛开展的变压器局部放电检测及在线监测大多依靠外置式特高频局部放电传感器。外置式传感器在变压器壳体
北极星输配电网获悉,11月9日,重庆市经济和信息化委员会发布关于印发《重庆市传感器及仪器仪表产业集群高质量发展行动计划(2023—2027年)》(以下简称《计划》)的通知。《计划》指出,支持建设萤石智能制造基地、科技园三期等项目,推动高新仪器仪表基地、智能调节阀、智能流量仪表等项目建设。聚
近年来,光伏市场进入了一个新的增长维度。SolarPowerEurope数据显示,2022年全球光伏新增装机量达239GW,占所有可再生能源新增容量的三分之二。国家能源局也宣称,2022年我国工商业光伏新增装机达25.87GW,同比增长236.7%;2023年一季度工商业光伏新增装机9.21GW,刷新了年度记录。据悉,从新增装机量
10月19日,市场监管总局发布关于计量促进仪器仪表产业高质量发展的指导意见。意见明确,到2025年,部分国产仪器仪表的计量性能和技术指标达到或接近国际先进水平。研发一批具有国际先进测量能力的高质量、高可靠性仪器仪表,攻克一批关键计量测试技术,提升社会公用计量标准效能,研制一批新型仪器仪表
2023年9月19日,全球电量传感器先导者,51年电量测量解决方案专家——莱姆电子于第十二届“北极星杯”光伏影响力品牌评选颁奖典礼中荣获“2023年度影响力光伏零部件及电气配套品牌”奖。现场,莱姆电子中国区产品管理总监周志健先生代表莱姆电子领取本次企业荣誉。本次活动由北极星电力网主办,活动现
2023年9月19-20日,由光伏行业知名媒体“北极星电力网”和“北极星太阳能光伏网”联合举办的光伏新时代论坛暨第十二届“北极星杯”光伏影响力品牌颁奖典礼在无锡隆重举办。纳芯微凭借其在光伏行业的产品解决方案和客户及行业的双重认可,在本次评选中荣获“光伏零部件及电气配套”组别的影响力品牌奖。
2023年9月13-15日,中国(上海)国际传感器技术与应用展览会(以下简称:SensorChina)在上海举办。纳芯微电子(以下简称“纳芯微”,科创板股票代码688052)在本次展会上展示了其在传感器方面的丰富产品及解决方案。纳芯微参加SensorChina2023智能传感器是智能化时代信息系统与外界环境交互的重要手段
8月31日,河南±800千伏特高压中州换流站完成一期12套变电站自供能无铅压电噪声监测装置安装调试,为厂界噪声的测量、分析与数字化呈现提供有力支撑。据介绍,“变电站噪声监测及治理”是国家电网有限公司环保重点工作。然而,传统变电站噪声监测装置高端声振传感器制造材料及技术被国外垄断,价格昂贵
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!