登录注册
请使用微信扫一扫
关注公众号完成登录
我要投稿
支撑电信、金融、医疗、安全、电力等关键行业大数据应用的基础软件平台将呈一体化形态,它以数据为中心,将操作系统、分布式存储、数据库等产品融合起来,对结构化、半结构化和非结构化等全数据进行高效存储与管理,并对应用提供统一的数据服务支撑接口。大数据环境下的基础软件平台很像一个“泛OS”,将传统操作系统、存储、数据库等等产品和组件有机融合,做到存储资源、计算资源等有效管理和调度,同时为上层数据应用提供统一、易用接口,实现数据采集、存储、计算、应用等全周期的高效易用、安全可靠和易管理。
国际上一体化融合的大数据处理平台已经成为主流趋势。国际IT巨头们在积极发展以平台为核心、面向新型应用模式的一体化行业解决方案和生态系统。2013年,EMC公司发布了自身的Apache Hadoop发行版—Pivotal HD,它将大规模并行数据库技术与Apache Hadoop框架集成,同时发布了一个名为HAWQ的技术,将Greenplum分析型数据库与Hadoop分布式架构进行紧密地融合,实现了HDFS上SQL并行数据库处理,提高了性能并使Hadoop平台与SQL开发者实现了接轨。惠普则发布了大数据解决方案HAVEn分析平台,该平台是惠普大数据产品的组合,它整合了Hadoop/HDFS、HP Autonomy语义处理引擎、HP Vertica列存数据库、EntERPrise Security安全技术等形成大数据处理方案。
围绕行业大数据应用构建大数据处理基础软件平台的关键问题是如何解决结构化和非/半结构化不同类型的数据融合,以及实现不同类型数据处理模式的整合。单一的MPP数据库或Hadoop产品一般很难满足行业用户对结构化和非/半结构化数据融合的业务需求,这两种方式的界限正在实际应用部署被打破,市场上正逐步形成以全数据处理为核心,垂直整合操作系统、MPP数据库、Hadoop、统一数据服务的基础软件平台产品。
在国内,业界的主流思路是:用基于MPP架构的新型数据库集群(如EMC GreenPlum、南大通用GBase 8a、HP Vertica等)管理结构化大数据,侧重于行业大数据分析型应用场景;用基于Hadoop的技术扩展和封装(如HBase数据库)管理非/半结构化大数据,侧重于互联网大数据应用场景。MPP集群与Hadoop产品混搭部署、相互融合,共同支撑大数据应用。
MPP与Hadoop的应用融合是大数据处理基础软件平台需要解决的一个核心技术问题。为了让平台能够更好地支撑行业大数据应用,不改变用户习惯的SQL这种更易于理解的、交互性更好的访问接口,架构需要以MPP数据库及计算框架为核心,将MPP运算调度引擎完全融入非关系型运算调度框架,实现可以同时调度关系运算和非关系运算的调度引擎,构建统一的结构化信息提取和数据类型转换框架,将非/半结构化数据映射为关系模型,实现面向关系模型的全数据统一视图,从而平滑的实现MPP数据库和Hadoop的统一调度和处理,为新型的基础软件平台和上层应用提供数据服务。
当前,国家的大数据战略、信息安全战略,以及大数据行业应用引发了对国产大数据处理基础软件平台的强劲需求。国产基础软件厂商应协同作战,抓紧市场与技术的双重时机,发展国产化大数据处理基础软件平台,并在国计民生的大数据应用系统中成为重要支撑。与此同时,在关键发展时间窗,国家应及时给予大力支持和帮助,避免大数据领域基础软件平台几年后再次走上“国产化”替代的老路。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
5月13日,辽宁省工业和信息化厅发布《关于组织开展2025年度工业领域节能降碳技术装备推荐工作的通知》,申报材料提交截止时间为2025年5月23日。全文如下:关于组织开展2025年度工业领域节能降碳技术装备推荐工作的通知各市工业和信息化局、沈抚示范区产业创新局:为加快推广节能降碳先进技术,加强重点
5月12日,北京市经济和信息化局发布2025年度国家工业和信息化领域节能降碳技术装备申报工作的通知,通知指出,此次申报范围包含重点行业领域节能降碳技术、用能低碳转型技术、工业减碳技术、数字化绿色化协同转型技术、数字化绿色化协同转型技术、高效节能装备五类,所申报技术装备已有成熟应用案例,
贵州省人民政府网5月12日发布贵州省领导同志工作分工调整。其中,罗强同志负责工业和信息化、国有资产、能源、大数据方面工作,杨同光同志负责生态环境保护、水利、农业农村、乡村振兴、林业、烤烟和卷烟、气象方面工作,郭成林同志负责自然资源、住房和城乡建设、交通运输、铁路、民航方面工作。贵州
5月9日,上汽集团旗下移动出行战略品牌——享道出行,宣布完成超13亿元人民币C轮融资,成为国内出行行业近三年来单笔融资金额最大的一次融资,在网约车市场投下了一枚重磅炸弹。自2018年成立以来,享道出行已构建起覆盖网约车、企业用车、个人租车和出租车的全场景智慧出行综合体。依托上汽集团的优势
“没想到分布式光伏出力预测准确率这么高,让我们提前采取管控措施,避免了二道沟1号台区出现反向重过载。”5月6日,冀北张家口崇礼区供电公司太子城供电所副所长张昭隆说。几天前,张家口供电公司部署的分布式光伏运行状态预测微应用发出预警:二道沟1号台区分布式光伏设备将在未来三天内出现光伏大发
人工智能加速新型电力系统构建的实践与思考——以华为数字解决方案为例杨永明(中能传媒能源安全新战略研究院)当前,人工智能(AI)已成为经济增长的新引擎,深刻改变着各行各业的运作方式。在能源电力行业,随着通用算力的飞速发展、算法模型的不断进化和行业数据的不断积累,AI技术的应用已深入到多
在“双碳”目标与新能源革命的双重驱动下,中国电力系统正经历百年未有之变局。当风电、光伏装机占比突破35%,传统电网的调度瓶颈与新能源消纳矛盾日益尖锐,一种名为“虚拟电厂”的新型电力组织模式正从实验室走向规模化落地。国家能源局最新数据显示,2025年我国虚拟电厂调节能力将突破5000万千瓦,
近日,国能日新自研「旷冥」大模型完成了自正式发布以来的首次迭代升级,迎来了「旷冥」2.0版本。本次升级,除了对模型稳定性和整体性能进行优化,更是在技术层面全效升级。首先在大模型技术方面,创新采用了多维度patching注意力机制架构,并显式嵌入了平流、对流方程,构建物理驱动的深度神经网络模
当地时间5月7日,2025年德国慕尼黑光伏储能展览会(IntersolarEurope)在慕尼黑新国际展览中心盛大启幕。作为全球太阳能领域规模最大的顶级盛会,此次展会吸引了超3000家国际企业参展。首航新能源再启海外追光之旅,携重磅新品及全场景智慧光储解决方案闪耀亮相展会,与来自全球同行伙伴及客户共同探索全
“五一”假期期间,在河北省永清县圆通速递北方总部基地二期项目内,30条全自动分拣线高速运转。恰逢换季与出行游玩高峰期,消费者频繁网购服装、出行装备等商品,这几日,圆通速递北方总部基地的日均操作量高达550万件。“自去年底全自动分拣线投产以来,我们快递的日处理能力提升至1000万件,产能和
近日,国能日新自研「旷冥」大模型完成了自正式发布以来的首次迭代升级,迎来了「旷冥」2.0版本。本次升级,除了对模型稳定性和整体性能进行优化,更是在技术层面全效升级。首先在大模型技术方面,创新采用了多维度patching注意力机制架构,并显式嵌入了平流、对流方程,构建物理驱动的深度神经网络模
北极星储能网获悉,4月28日,工信部发布2025年汽车标准化工作要点。其中提出,分析评估前沿技术发展趋势和潜在应用场景,识别研判未来汽车标准化发展方向,推动制定及发布车用人工智能、固态电池、电动汽车换电等标准子体系,启动数据治理及应用等新领域标准体系建设,超前开展飞行汽车等新业态标准化
4月24日晚间,云涌科技披露2024年度业绩,实现营业总收入2.97亿元,同比增长5.18%;归母净利润亏损约3509.31万元。主营业务分行业、分产品、分地区、分销售模式情况对于业绩变动的主要原因,公司表示,报告期内,公司紧密围绕客户需求加速重点产品、重要项目落地实施,在工业信息安全产品业务方面,公
近日,海尔新能源宣布成功通过ISO37301:2021合规管理体系认证,成为光伏、风电、储能、智慧能源管理系统及逆变器领域中率先获此国际标准认证的企业之一。此次认证标志着海尔新能源在合规管理方面达到了国际标准要求,助力全球化快速发展。ISO37301:2021作为一项国际权威标准,凭借其严谨客观的评定体系
近年来,我国新型电力系统建设逐步推进,以风电、光伏发电为代表的新能源发电逐步成为未来电力系统的主体电源,新型经营主体陆续入市。我国电力市场迈入了“3.0”全新发展时代!继2021年燃煤发电上网电价市场化改革后,新能源电价改革在2025年迎来重磅政策。新能源上网电量全部进入电力市场,上网电价
4月15日,国务院国资委发布564家“双百企业”名单,详情如下:“双百企业”名单中国核工业集团有限公司1.中核矿业科技集团有限公司2.中核控制系统工程有限公司3.中国核工业华兴建设有限公司4.中国核工业二三建设有限公司5.西安中核核仪器股份有限公司中国航天科技集团有限公司6.北京神舟航天软件技术股
北极星售电网获悉,4月15日,重庆市人民政府发布关于印发《重庆市新能源汽车便捷超充行动计划(2024—2025年)》(以下简称《计划》)的通知。《计划》指出,到2025年年底,实现新能源汽车与超充网络相互协同、与电网融合互动,建成布局均衡、充电便捷、智能高效、机制完备、技术先进的便捷超充生态,
近年来,我国新型电力系统建设逐步推进,以风电、光伏发电为代表的新能源发电逐步成为未来电力系统的主体电源,新型经营主体陆续入市。我国电力市场迈入了“3.0”全新发展时代!继2021年燃煤发电上网电价市场化改革后,新能源电价改革在2025年迎来重磅政策。新能源上网电量全部进入电力市场,上网电价
2025年初,“136号文”的发布吹响了新能源全面参与电力市场的号角;Deepseek横空出世引发的AI平权化浪潮,则让信息安全要求严格的能源企业用上了低成本私有大模型,风电的生产运营又一次来到了拐点时刻。在这两大因素的交织影响下,“十五五”期间的风电生产会是什么模样?我们又将如何面对这一行业巨
在双碳政策及国家能源局136号文《新型电力系统发展指导意见》的指引下,我国正加速构建以新能源为主体的新型电力体系。随着可再生能源占比不断增加,其波动特性对电网灵活调节提出更高要求。虚拟电厂凭借聚合分布式资源、快速响应调控的技术优势,成为破解系统调节难题、提升供电可靠性的关键创新载体
近日,国家电投贵州金元茶园电厂利用现有服务器,成功构建基于DeepSeek-R1人工智能模型的本地知识库,实现检索、校核等基础功能,助力传统火电企业生产管理模式向数字化、智能化转型升级。该厂紧跟时代步伐,超前筹划、快速部署,组建专业技术团队搭建本地知识库,通过后续的数据“投喂”,可在企业信
3月14日,国网天津电科院协助河北区政府在天津市电力物联网重点实验室举办河北区所属天津市企业重点实验室政企参观交流活动。河北区政府副区长、区科技局、4家天津市企业重点实验室代表参加。政企交流活动代表到电科院天津市电力物联网重点实验室参观电力电缆分实验室、储能分实验室、网络与信息安全分
随着2025山西城市管网暨智慧水务博览会的深入进行,来自全国乃至全球的水务行业精英、专家学者及企业代表汇聚一堂,共同探讨智慧水务的未来发展趋势与技术创新。展会现场,高科技产品与解决方案琳琅满目,从智能水表、远程监控系统到大数据分析平台,每一项技术都彰显着智慧水务的无限潜力。特别值得关
北极星电力软件网获悉,近日,中共福建省委、福建省人民政府印发了《福建省质量强省建设纲要》,并发出通知。《福建省质量强省建设纲要》明确了重点任务。(一)实施重点产品质量提升工程1.提高食品农产品质量安全水平。严格落实食品安全“四个最严”要求,实行全主体、全品种、全链条监管,实施粮食质
近日,习近平总书记在中共中央政治局第三次集体学习时强调,切实加强基础研究,夯实科技自立自强根基。企业是创新的主体。近年来,南方电网公司大力开展基础研究和应用基础研究,构建专业齐全的创新平台体系,充分发挥国家实验室引领作用,加快科技自立自强,全力打造国家战略科技力量和全球能源创新高
为积极应对能源互联网在新形势下的机遇与挑战,清华大学、中国南方电网有限责任公司、国家能源互联网产业及技术创新联盟盛大召开“2022国家能源互联网大会”。大会现场《openEuler在电力行业应用和生态白皮书》正式发布。《openEuler在电力行业应用和生态白皮书》是由中国能源研究会信息通信专业委员会
为贯彻中央经济工作会议精神,落实《政府工作报告》和全国工业和信息化工作会议任务部署,推动行业质量技术创新和管理进步,促进制造业高质量发展,工业和信息化部办公厅近日发出通知,部署了推动企业质量管理体系升级、实施制造业质量管理数字化行动、深化企业先进质量管理工具与方法运用、提高制造业
当前,国家电网有限公司加快推动电网向能源互联网升级,很多领域即将迈入“无人区”,需要突破别人尚未掌握的重大技术。公司党组为强化科技创新出台了一系列有力举措,创造了良好的环境和条件。作为公司科技产业领军企业,南瑞集团有限公司将以习近平新时代中国特色社会主义思想为指导,深入贯彻公司20
一、研发背景长期以来,电力通信按照分层、分级、分区模式进行管理,各级电力企业已建综合网管系统基本上都是孤立的、非标准化的,业务和信息集成度相对较差,无法进行有效的数据共享,容易形成资源孤岛和信息孤岛。十二五期间,国家电网公司通信网建设将在广度和深度上都有了新的巨大发展,同时也面临新的重
恒华科技6月3日早间公告,公司与厦门亿力吉奥信息科技有限公司签署了《电力信息社区项目合作协议》。据悉,亿力吉奥作为国网信通产业集团的下属企业,是电力行业整体解决方案的软件和服务提供商。亿力吉奥基于自主研发具有核心竞争力与自主知识产权的电力GIS基础软件平台EPGIS平台,是国家电网公司旗下
一、 方案概述:基于一体化支撑平台,研发了实时监控与预警、调度计划、安全校核和调度管理四大类应用,实现了调度控制业务的横向集成和纵向贯通,充分考虑各级调度的业务特点和相互之间的内在联系,实现一体化运行、一体化维护和一体化使用,能够满足各级调度机构及调度各专业的需要,满足一体化智能
我国云计算产业即将迎来黄金发展机遇。近日,工信部启动针对云计算的“十三五”规划,将重点培育龙头企业,发挥其对产业发展的辐射作用,打造云计算产业链。在政府机构大力主导信息国产化的背景下,实现国产化设备进口替代已成为保障信息安全的必经之路,尤其是在“棱镜门”、“黑客攻击”等频频发生的信息安全事件之后,对于国产设备的可管可控以及信息安全的切实需求一再提升,国产化设备进口替代的进程也大大提速。相信随着云计算“十三五”规划的进一步落地,未来信息设备国产化的步伐有望进一
2014年7月11日,南瑞集团北京中电普华信息技术有限公司自主研发的“SoGrid 云应用平台”(beta版)新产品发布会在北京隆重召开。SoGrid的发布将为企业应用开发者提供一种全新的、高效的、集成的、构造式的开发环境,创造一种轻松的云开发体验;为企业业务应用的稳定可靠运行提供全面的运行监管保障,为企业用户带来更多运行安全、应用友好的用户体验。国家工信部、国家电网等数十家(特)大型企业、数十家IT界知名企业、相关高校及研究机构100多位嘉宾出席并共同见证这一历史时刻。SoGrid是一款提供丰富构造服务的企业级云应用开发、部署
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!