登录注册
请使用微信扫一扫
关注公众号完成登录
我要投稿
支撑电信、金融、医疗、安全、电力等关键行业大数据应用的基础软件平台将呈一体化形态,它以数据为中心,将操作系统、分布式存储、数据库等产品融合起来,对结构化、半结构化和非结构化等全数据进行高效存储与管理,并对应用提供统一的数据服务支撑接口。大数据环境下的基础软件平台很像一个“泛OS”,将传统操作系统、存储、数据库等等产品和组件有机融合,做到存储资源、计算资源等有效管理和调度,同时为上层数据应用提供统一、易用接口,实现数据采集、存储、计算、应用等全周期的高效易用、安全可靠和易管理。
国际上一体化融合的大数据处理平台已经成为主流趋势。国际IT巨头们在积极发展以平台为核心、面向新型应用模式的一体化行业解决方案和生态系统。2013年,EMC公司发布了自身的Apache Hadoop发行版—Pivotal HD,它将大规模并行数据库技术与Apache Hadoop框架集成,同时发布了一个名为HAWQ的技术,将Greenplum分析型数据库与Hadoop分布式架构进行紧密地融合,实现了HDFS上SQL并行数据库处理,提高了性能并使Hadoop平台与SQL开发者实现了接轨。惠普则发布了大数据解决方案HAVEn分析平台,该平台是惠普大数据产品的组合,它整合了Hadoop/HDFS、HP Autonomy语义处理引擎、HP Vertica列存数据库、EntERPrise Security安全技术等形成大数据处理方案。
围绕行业大数据应用构建大数据处理基础软件平台的关键问题是如何解决结构化和非/半结构化不同类型的数据融合,以及实现不同类型数据处理模式的整合。单一的MPP数据库或Hadoop产品一般很难满足行业用户对结构化和非/半结构化数据融合的业务需求,这两种方式的界限正在实际应用部署被打破,市场上正逐步形成以全数据处理为核心,垂直整合操作系统、MPP数据库、Hadoop、统一数据服务的基础软件平台产品。
在国内,业界的主流思路是:用基于MPP架构的新型数据库集群(如EMC GreenPlum、南大通用GBase 8a、HP Vertica等)管理结构化大数据,侧重于行业大数据分析型应用场景;用基于Hadoop的技术扩展和封装(如HBase数据库)管理非/半结构化大数据,侧重于互联网大数据应用场景。MPP集群与Hadoop产品混搭部署、相互融合,共同支撑大数据应用。
MPP与Hadoop的应用融合是大数据处理基础软件平台需要解决的一个核心技术问题。为了让平台能够更好地支撑行业大数据应用,不改变用户习惯的SQL这种更易于理解的、交互性更好的访问接口,架构需要以MPP数据库及计算框架为核心,将MPP运算调度引擎完全融入非关系型运算调度框架,实现可以同时调度关系运算和非关系运算的调度引擎,构建统一的结构化信息提取和数据类型转换框架,将非/半结构化数据映射为关系模型,实现面向关系模型的全数据统一视图,从而平滑的实现MPP数据库和Hadoop的统一调度和处理,为新型的基础软件平台和上层应用提供数据服务。
当前,国家的大数据战略、信息安全战略,以及大数据行业应用引发了对国产大数据处理基础软件平台的强劲需求。国产基础软件厂商应协同作战,抓紧市场与技术的双重时机,发展国产化大数据处理基础软件平台,并在国计民生的大数据应用系统中成为重要支撑。与此同时,在关键发展时间窗,国家应及时给予大力支持和帮助,避免大数据领域基础软件平台几年后再次走上“国产化”替代的老路。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
近日,《广东省促进海洋经济高质量发展条例》已由广东省第十四届人民代表大会常务委员会第十八次会议于2025年5月28日通过,现予公布,自2025年7月1日起施行。文件指出,省、地级以上市人民政府能源等有关主管部门应当加大海洋油气资源勘探开发力度,推进液化天然气等接收及储气设施、配套码头和配套外
为贯彻落实国家能源局《2025年能源工作指导意见》关于“统筹推进新型电力系统建设,推进虚拟电厂高质量发展”的要求,经省发展改革委、省能源局、浙江能源监管办同意,浙江电力市场管理委员会发布了《浙江省虚拟电厂运营管理实施细则(试行)》(以下简称“细则”),对虚拟电厂主体注册、能力认证、变
6月3日,国家发展改革委国家能源局发布关于深化提升“获得电力”服务水平全面打造现代化用电营商环境的意见,支持绿色电力应用。助力绿电接入。各省级能源(电力)主管部门牵头组织开展分布式光伏接入电网承载力评估信息公开工作,组织供电企业针对性制定提升措施,促进配电网与分布式新能源协调发展。
北极星售电网获悉,6月3日,国家发展改革委发布关于深化提升“获得电力”服务水平全面打造现代化用电营商环境的意见(发改能源规〔2025〕624号)。文件明确,支持绿色电力应用。助力绿电接入。各省级能源(电力)主管部门牵头组织开展分布式光伏接入电网承载力评估信息公开工作,组织供电企业针对性制定
6月3日,国家能源局关于进一步深化电力业务资质许可管理更好服务新型电力系统建设的实施意见发布。文件提到,优化资质许可管理制度。支持电力领域新模式、新业态创新发展,除另有规定外,原则上将分布式光伏、分散式风电、新型储能、智能微电网等新型经营主体纳入电力业务许可豁免范围。合理压减承装(
北极星售电网获悉,6月3日,国家能源局发布关于进一步深化电力业务资质许可管理更好服务新型电力系统建设的实施意见。文件明确,优化资质许可管理制度。支持电力领域新模式、新业态创新发展,除另有规定外,原则上将分布式光伏、分散式风电、新型储能、智能微电网等新型经营主体纳入电力业务许可豁免范
编者按“双碳”战略的实施加速了分布式能源在配电网中的接入,导致配电网运行特性发生深刻变化。同时,分布式能源的不确定性削弱了配电网的实时可观性,难以精准监测其运行状态,由此引发的过载、过压和供电质量下降等问题已严重威胁配电网的安全性和稳定性。传统配电网状态估计方法依赖全面、精确的量
一场“智”与“能”的双向奔赴回顾历史,整个人类文明进程始终与能源开发利用紧密相关。如今,能源发展进入资源、环境、气候三重约束期,急需沿着清洁低碳方向进行转型。与此同时,人工智能技术正在蓬勃兴起,加速赋智于千行百业,“‘人工智能+’行动”的字眼更是连续两年见诸全国两会政府工作报告,A
5月28日,甘肃省政府新闻办举行“七地一屏一通道”系列政策解读新闻发布会——全国重要的新能源及新能源装备制造基地专场。发布会中提到,截至4月底,甘肃新能源装机达6720万千瓦,占电源总装机的64.7%,排名全国第2;2024年全省新能源发电806亿千瓦时,占总发电量的35.4%,排名全国第2。发布会表示,
近日,国家电投、浙江省新能源、青岛城投、湖南红太阳、广东省电力工业燃料最新招聘岗位,北极星太阳能光伏网整理如下:国家电投集团新能源科技有限公司,是国家电投集团中央研究院全资产业化子公司,负责实施集团公司B类科研课题项目--高效品体硅铜栅线异质结光伏电池(C-HJT)研究及产技术开发。公司20
5月31日8时58分,我国首套350兆瓦级超超临界燃煤发电机组——国家电投通辽2×350兆瓦智慧热电联产机组项目6号机组通过168小时满负荷试运行,标志着该项目顺利实现“双投”目标,正式投入商业运营。国家电投通辽2×350兆瓦智慧热电联产机组项目投产后,作为内蒙古通辽市最大的热源点,将满足通辽市城区1
关于召开2025第七届综合能源服务与零碳园区建设大会的通知当前,能源产业生态正经历从“供给侧资源主导”向“需求侧价值创造”的范式跃迁。现代能源服务业通过构建“用户需求-能效服务-价值共享”的新型商业闭环,催生出涵盖规划咨询、系统集成、智慧运维的全周期解决方案。为把握产业变革机遇,北极星
近日,甘肃省人民政府发布关于张锋刚等同志职务任免的通知,甘肃能化总经理、副总经理等领导班子调整,详情如下:关于张锋刚等同志职务任免的通知各市、自治州人民政府,甘肃矿区办事处,兰州新区管委会,省政府各部门,中央在甘各单位:甘肃省人民政府决定:张锋刚任甘肃能源化工投资集团有限公司总经
5月27日,中广核烟台招远400MW海上光伏项目实现全容量并网,成为全国首个建成投运的桩基固定式海上光伏电站。该项目采用华为智能光伏解决方案,配备数千台华为逆变器,预计年均发电量达6.94亿千瓦时,不仅为胶东半岛提供了强有力的绿色能源支撑,更对我国海上光伏产业的发展有重要的示范引领作用。在莱
为切实提升网络信息安全防护技能,确保演练期间关键业务系统及数据安全,5月21日,国能龙岩发电有限公司从提高网络安全防控意识,自觉规范上网行为等方面着手,全力做好集团公司网络安全攻防演练工作。该公司要求各部门高度重视网络安全攻防演练工作,提高政治站位,加强网络安全宣贯教育,提高全员安
日前,国家发展改革委、国家能源局、工业和信息化部、市场监管总局联合印发《关于公布首批车网互动规模化应用试点的通知》,将9个城市以及30个项目列入首批车网互动规模化应用试点范围,标志着车网互动从前期的探索研究、局部示范阶段,迈入推进规模化应用试点落地的新阶段。车网互动是指电动汽车与电
5月12日,中电联(北京)数智科技有限公司成立会议在北京举行。中国电力企业联合会党委副书记、专职副理事长王抒祥出席会议并讲话。王抒祥指出,在电力行业数字化、智能化高速发展的全新形势下,中电联党委作出成立中电联(北京)数智科技有限公司的决定恰逢其时。面对新形势新任务,数智科技公司要充
北极星储能网获悉,4月28日,工信部发布2025年汽车标准化工作要点。其中提出,分析评估前沿技术发展趋势和潜在应用场景,识别研判未来汽车标准化发展方向,推动制定及发布车用人工智能、固态电池、电动汽车换电等标准子体系,启动数据治理及应用等新领域标准体系建设,超前开展飞行汽车等新业态标准化
4月24日晚间,云涌科技披露2024年度业绩,实现营业总收入2.97亿元,同比增长5.18%;归母净利润亏损约3509.31万元。主营业务分行业、分产品、分地区、分销售模式情况对于业绩变动的主要原因,公司表示,报告期内,公司紧密围绕客户需求加速重点产品、重要项目落地实施,在工业信息安全产品业务方面,公
近日,海尔新能源宣布成功通过ISO37301:2021合规管理体系认证,成为光伏、风电、储能、智慧能源管理系统及逆变器领域中率先获此国际标准认证的企业之一。此次认证标志着海尔新能源在合规管理方面达到了国际标准要求,助力全球化快速发展。ISO37301:2021作为一项国际权威标准,凭借其严谨客观的评定体系
近年来,我国新型电力系统建设逐步推进,以风电、光伏发电为代表的新能源发电逐步成为未来电力系统的主体电源,新型经营主体陆续入市。我国电力市场迈入了“3.0”全新发展时代!继2021年燃煤发电上网电价市场化改革后,新能源电价改革在2025年迎来重磅政策。新能源上网电量全部进入电力市场,上网电价
4月15日,国务院国资委发布564家“双百企业”名单,详情如下:“双百企业”名单中国核工业集团有限公司1.中核矿业科技集团有限公司2.中核控制系统工程有限公司3.中国核工业华兴建设有限公司4.中国核工业二三建设有限公司5.西安中核核仪器股份有限公司中国航天科技集团有限公司6.北京神舟航天软件技术股
随着2025山西城市管网暨智慧水务博览会的深入进行,来自全国乃至全球的水务行业精英、专家学者及企业代表汇聚一堂,共同探讨智慧水务的未来发展趋势与技术创新。展会现场,高科技产品与解决方案琳琅满目,从智能水表、远程监控系统到大数据分析平台,每一项技术都彰显着智慧水务的无限潜力。特别值得关
北极星电力软件网获悉,近日,中共福建省委、福建省人民政府印发了《福建省质量强省建设纲要》,并发出通知。《福建省质量强省建设纲要》明确了重点任务。(一)实施重点产品质量提升工程1.提高食品农产品质量安全水平。严格落实食品安全“四个最严”要求,实行全主体、全品种、全链条监管,实施粮食质
近日,习近平总书记在中共中央政治局第三次集体学习时强调,切实加强基础研究,夯实科技自立自强根基。企业是创新的主体。近年来,南方电网公司大力开展基础研究和应用基础研究,构建专业齐全的创新平台体系,充分发挥国家实验室引领作用,加快科技自立自强,全力打造国家战略科技力量和全球能源创新高
为积极应对能源互联网在新形势下的机遇与挑战,清华大学、中国南方电网有限责任公司、国家能源互联网产业及技术创新联盟盛大召开“2022国家能源互联网大会”。大会现场《openEuler在电力行业应用和生态白皮书》正式发布。《openEuler在电力行业应用和生态白皮书》是由中国能源研究会信息通信专业委员会
为贯彻中央经济工作会议精神,落实《政府工作报告》和全国工业和信息化工作会议任务部署,推动行业质量技术创新和管理进步,促进制造业高质量发展,工业和信息化部办公厅近日发出通知,部署了推动企业质量管理体系升级、实施制造业质量管理数字化行动、深化企业先进质量管理工具与方法运用、提高制造业
当前,国家电网有限公司加快推动电网向能源互联网升级,很多领域即将迈入“无人区”,需要突破别人尚未掌握的重大技术。公司党组为强化科技创新出台了一系列有力举措,创造了良好的环境和条件。作为公司科技产业领军企业,南瑞集团有限公司将以习近平新时代中国特色社会主义思想为指导,深入贯彻公司20
一、研发背景长期以来,电力通信按照分层、分级、分区模式进行管理,各级电力企业已建综合网管系统基本上都是孤立的、非标准化的,业务和信息集成度相对较差,无法进行有效的数据共享,容易形成资源孤岛和信息孤岛。十二五期间,国家电网公司通信网建设将在广度和深度上都有了新的巨大发展,同时也面临新的重
恒华科技6月3日早间公告,公司与厦门亿力吉奥信息科技有限公司签署了《电力信息社区项目合作协议》。据悉,亿力吉奥作为国网信通产业集团的下属企业,是电力行业整体解决方案的软件和服务提供商。亿力吉奥基于自主研发具有核心竞争力与自主知识产权的电力GIS基础软件平台EPGIS平台,是国家电网公司旗下
一、 方案概述:基于一体化支撑平台,研发了实时监控与预警、调度计划、安全校核和调度管理四大类应用,实现了调度控制业务的横向集成和纵向贯通,充分考虑各级调度的业务特点和相互之间的内在联系,实现一体化运行、一体化维护和一体化使用,能够满足各级调度机构及调度各专业的需要,满足一体化智能
我国云计算产业即将迎来黄金发展机遇。近日,工信部启动针对云计算的“十三五”规划,将重点培育龙头企业,发挥其对产业发展的辐射作用,打造云计算产业链。在政府机构大力主导信息国产化的背景下,实现国产化设备进口替代已成为保障信息安全的必经之路,尤其是在“棱镜门”、“黑客攻击”等频频发生的信息安全事件之后,对于国产设备的可管可控以及信息安全的切实需求一再提升,国产化设备进口替代的进程也大大提速。相信随着云计算“十三五”规划的进一步落地,未来信息设备国产化的步伐有望进一
2014年7月11日,南瑞集团北京中电普华信息技术有限公司自主研发的“SoGrid 云应用平台”(beta版)新产品发布会在北京隆重召开。SoGrid的发布将为企业应用开发者提供一种全新的、高效的、集成的、构造式的开发环境,创造一种轻松的云开发体验;为企业业务应用的稳定可靠运行提供全面的运行监管保障,为企业用户带来更多运行安全、应用友好的用户体验。国家工信部、国家电网等数十家(特)大型企业、数十家IT界知名企业、相关高校及研究机构100多位嘉宾出席并共同见证这一历史时刻。SoGrid是一款提供丰富构造服务的企业级云应用开发、部署
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!