登录注册
请使用微信扫一扫
关注公众号完成登录
我要投稿
云计算(Cloud Computing)是由分布式计算(Distributed Computing)、并行处理(Parallel Computing)、网格计算(Grid Computing)发展来的,其最基本的概念,是透过网络将庞大的计算处理程序自动分拆成无数个较小的子程序,再交由多部服务器所组成的庞大系统经搜寻、计算分析之后将处理结果回传给用户。透过这项技术,网络服务提供者可以在数秒之内,达成处理数以千万计甚至亿计的信息,达到和“超级计算机”同样强大效能的网络服务,是一种新兴的商业计算模型。
云计算的核心技术
云计算系统运用了许多技术,其中以编程模型、数据管理技术、数据存储技术、虚拟化技术、云计算平台管理技术最为关键。
(1)编程模型
MapReduce是Google开发的java、Python、C++编程模型,它是一种简化的分布式编程模型和高效的任务调度模型,用于大规模数据集(大于1TB)的并行运算。严格的编程模型使云计算环境下的编程十分简单。MapReduce模式的思想是将要执行的问题分解成Map(映射)和Reduce(化简)的方式,先通过Map程序将数据切割成不相关的区块,分配(调度)给大量计算机处理,达到分布式运算的效果,再通过Reduce程序将结果汇整输出。
(2) 海量数据分布存储技术
云计算系统由大量服务器组成,同时为大量用户服务,因此云计算系统采用分布式存储的方式存储数据,用冗余存储的方式保证数据的可靠性。云计算系统中广泛使用的数据存储系统是Google的GFS和Hadoop团队开发的GFS的开源实现HDFS。
GFS即Google文件系统(Google File System),是一个可扩展的分布式文件系统,用于大型的、分布式的、对大量数据进行访问的应用。GFS的设计思想不同于传统的文件系统,是针对大规模数据处理和Google应用特性而设计的。它运行于廉价的普通硬件上,但可以提供容错功能。它可以给大量的用户提供总体性能较高的服务。
一个GFS集群由一个主服务器(master)和大量的块服务器(chunkserver)构成,并被许多客户(Client)访问。主服务器存储文件系统所以的元数据,包括名字空间、访问控制信息、从文件到块的映射以及块的当前位置。它也控制系统范围的活动,如块租约(lease)管理,孤儿块的垃圾收集,块服务器间的块迁移。主服务器定期通过HeartBeat消息与每一个块服务器通信,给块服务器传递指令并收集它的状态。GFS中的文件被切分为64MB的块并以冗余存储,每份数据在系统中保存3个以上备份。
客户与主服务器的交换只限于对元数据的操作,所有数据方面的通信都直接和块服务器联系,这大大提高了系统的效率,防止主服务器负载过重。
(3) 海量数据管理技术
云计算需要对分布的、海量的数据进行处理、分析,因此,数据管理技术必需能够高效的管理大量的数据。云计算系统中的数据管理技术主要是Google的BT(BigTable)数据管理技术和Hadoop团队开发的开源数据管理模块HBase。
BT是建立在GFS, Scheduler, Lock Service和MapReduce之上的一个大型的分布式数据库,与传统的关系数据库不同,它把所有数据都作为对象来处理,形成一个巨大的表格,用来分布存储大规模结构化数据。
Google的很多项目使用BT来存储数据,包括网页查询,Google earth和Google金融。这些应用程序对BT的要求各不相同:数据大小(从URL到网页到卫星图象)不同,反应速度不同(从后端的大批处理到实时数据服务)。对于不同的要求,BT都成功的提供了灵活高效的服务。
(4)虚拟化技术
通过虚拟化技术可实现软件应用与底层硬件相隔离,它包括将单个资源划分成多个虚拟资源的裂分模式,也包括将多个资源整合成一个虚拟资源的聚合模式。虚拟化技术根据对象可分成存储虚拟化、计算虚拟化、网络虚拟化等,计算虚拟化又分为系统级虚拟化、应用级虚拟化和桌面虚拟化。
(5)云计算平台管理技术
云计算资源规模庞大,服务器数量众多并分布在不同的地点,同时运行着数百种应用,如何有效的管理这些服务器,保证整个系统提供不间断的服务是巨大的挑战。
云计算系统的平台管理技术能够使大量的服务器协同工作,方便的进行业务部署和开通,快速发现和恢复系统故障,通过自动化、智能化的手段实现大规模系统的可靠运营。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
北极星售电网获悉,6月25日,山东烟台市发展改革委发布第144322号:关于“高质量推进烟台实施绿色低碳转型”建议的答复。答复提出,能源结构优化方面。一是打造清洁能源示范高地,全国首个大规模近海桩基固定式海上光伏项目成功并网发电,实现山东海上光伏发电零突破,4大核电基地建设梯次推进,222万
位于呼和浩特市南20余公里的和林格尔新区,是国家“东数西算”工程八大枢纽、十大数据中心集群之一,也是国家大数据综合试验区的核心区。记者采访获悉,截至目前,新区46个数据中心项目总算力规模达9.1万P,其中智能算力规模达8.6万P。当地通过“风—光—储”一体化清洁能源供电方式为算力中心提供“绿
2025年6月23日,工业和信息化部等九部门关于印发《黄金产业高质量发展实施方案(2025—2027年)》的通知,通知指出,高端新材料应用:半导体用高纯低碳金(银)靶材和蒸发料、太阳能光伏银浆料、低温共烧陶瓷和片式多层陶瓷电容器等核心元器件用金浆料、生物医用金(银)材料、电接触金(银)及合金材
张海峰欢迎袁明一行的到访,并对华为公司长期以来给予内蒙古电力集团的关注和支持表示感谢。他表示,双方一直保持着良好的合作关系,希望进一步深化合作,创新合作模式,实现互利共赢;积极参与电力集团“十五五”电网规划编制,在技术、机制、产业等方面给予更多支持;在电力信息通信、大数据平台、构
近日,工业和信息化部等六部门联合印发《纺织工业数字化转型实施方案》(以下简称《实施方案》),聚焦新一代信息技术赋能行动、新模式新业态创新应用行动、产业高质量发展行动、夯实支撑基础行动等4个方面提出18项具体工作任务。《实施方案》提出,加速绿色化转型。推动纺织全产业链生产装备、用能单
北极星储能网获悉,6月23日消息,通辽市人民政府关于印发蒙东(通辽)绿色算力产业发展规划的通知,其中,打造绿色算力中心中提出,鼓励算力中心部署高效IDC设备,推广模块化UPS,支持算力企业探索利用共享储能、储氢、飞轮储能、锂电池等作为多元化储能和备用电源装置。优化算力中心能源、水资源、土
6月14日,随着金华燃机500千伏电力送出工程投运,今年浙江电网迎峰度夏重点工程全部投产。该工程起于金华燃机电厂,与500千伏双龙—兰溪电厂线路π接,并新建长12.36千米的500千伏金华燃机—双龙线路。该工程的投产可保障电厂发电可靠送出,增强金华地区电力供应能力。年初以来,浙江经济平稳向好,用
北极星输配电网整理了6月16日~6月20日的一周电网项目动态。浙江金华燃机500千伏送出工程6月14日,金华燃机500千伏送出工程投产。金华燃机500千伏电力送出工程总投资约1.4亿元,总长度12.36公里,新建38基铁塔,于2024年12月开工。项目起于金华燃机电厂,接入500千伏双兰、龙兰线。甘肃—浙江±800千伏
近日,经内蒙古电力集团内蒙古超高压供电公司全力推动、重点落实,内蒙古自治区电力能源重点项目——新区北500千伏输变电工程获自治区能源局核准批复。据了解,该工程建设地点位于呼和浩特经济技术开发区,总投资约4.91亿元,拟新建1座500千伏变电站,新建7.6公里线路。项目投产后,将有效缓解永圣域50
京能集团评标专家征集根据京能集团发展需要,现面向集团内部及社会开展评标专家公开征集工作,吸纳具备现场评标工作能力的专家入库,参加招标采购评标工作,有关要求和入库流程如下。一、基本要求评标专家人员需符合申报条件且自愿参加京能集团项目评标工作,能够自觉遵守招标投标法律法规及评标专家管
近年来,江苏省张家港市扬子江国际化工园创新建立了打通生产工艺链、污染控制链和监测监管链的系统化环境治理模式,为化工园区绿色低碳发展提供了有益探索。智能改造、低碳转型,升级绿色产业链扬子江化工园(以下简称园区)是长江流域最大的精细化工园区,建有国内最大的高性能涂料生产基地,生产过程
随着碳达峰碳中和战略深入实施,新型电力系统加快建设,电力系统向源网荷储多元互动发展。虚拟电厂作为主要载体形式,能够科学聚合需求侧资源,基于市场价格信号,发挥多向协同、灵活互动优势,为新型电力系统建设提供新技术、新模式、新业态。当前,我国虚拟电厂仍处于发展探索阶段。一方面,亟待建设
新型电力系统建设需要怎样的配电网?如何提升配电网的可靠性、承载力和灵活性?10月16日,在《供用电》创刊40周年之际,英大传媒投资集团有限公司召开现代配电系统技术交流会暨《供用电》办刊研讨会。与会专家围绕现代配电系统技术与趋势展开热烈讨论。配电网成为保供和转型主战场党的二十大以来,我国
电力数据是现代社会基础设施的重要组成部分,它不仅涉及个人用电习惯、电网运行状况、能源分配等关键信息,而且对保障个人隐私和经济安全具有至关重要的作用。确保电力数据的安全,对于维护社会稳定和促进经济发展具有不可替代的作用。近日,国网浙江电力推动的《电力数据共享系统框架和要求》在国际电
3月22日,云南电网公司信息中心、昆明供电局联合南方电网数字企业科技(广东)有限公司、云南大学共同完成的“面向海量多元用户的区块链与边缘计算的智慧用电应用研究”顺利通过由中国电力企业联合会组织的科技成果鉴定,在智慧用电的边缘计算和区块链应用方面达到了国内领先水平。该项目针对配电网云
北极星电力软件网获悉,11月7日,山东省发展和改革委员会发布关于印发《山东省服务业数字化提速行动方案》(以下简称《方案》)的通知。《方案》指出,强化高端软件供给。一是重点突破基础软件。突破服务器操作系统、软件建模工具、低代码开发平台等领域关键技术,加强国产软硬件耦合适配。二是聚力做
5月上旬,国网江苏省电力有限公司电力科学研究院完成了供电电压分析系统的功能升级,在智能监测、智能定位、智能溯源的基础上,进一步提升了电压监测数据实时性、诊断准确性及治理科学性。电压质量是供电质量监管的重要内容,也是体现供电服务水平的一项综合性指标。对电压质量进行监测是电网企业保证
北极星电力软件网获悉,3月24日,湖南省工业和信息化厅发布关于征集2023年度全省重点软件领域关键技术产品攻关项目的通知。通知明确,坚持“补短板、锻长板”,围绕基础软件、工业软件、新兴领域软件等方向,着力提升关键软件产品和服务供给能力,加快发展操作系统、数据库、中间件等基础软件,计算机
云计算产业是一种通过网络统一组织和灵活调用各种网络存储和计算资源,以实现大规模计算与信息处理的经济活动系统。当前,云计算产业的发展规模与相关资源投入呈急剧增长趋势,其相关应用也从互联网行业向政务、金融、工业、医疗等传统行业加速渗透。云计算在促进社会数字化转型、带动经济发展的同时,
8月16日,福建莆田供电公司员工张世良打开多端互联低压柔性微电网系统,查看湄洲岛5个台区电网的运行情况。该系统于7月中旬投运,为台区级微电网的构建提供了可复制、可推广的解决方案。国网福建省电力有限公司在湄洲岛开展岛屿级新型电力系统示范建设,重点建设多端互联低压柔性微电网项目,基于融合
8月16日,福建莆田供电公司员工张世良打开多端互联低压柔性微电网系统,查看湄洲岛5个台区电网的运行情况。该系统于7月中旬投运,为台区级微电网的构建提供了可复制、可推广的解决方案。国网福建省电力有限公司在湄洲岛开展岛屿级新型电力系统示范建设,重点建设多端互联低压柔性微电网项目,基于融合
7月22日,中国工程院院士、天津大学教授余贻鑫出席第三届全国“配电圆桌”论坛并发表题为《分布式智能电网——面向21世纪的重大基础设施》的主题演讲。以下为发言内容整理能源革命的实现高度依赖于未来高比例的可再生能源,特别是就地开发、就地消纳的分布式可再生能源。分布式可再生能源发电不仅能节
日前,安阳市生态环境局印发《安阳市“无废城市”建设实施方案(2025—2027年)》(征求意见稿)。文件提出,到2027年底,安阳市“无废城市”制度、市场、技术、监管体系基本完善,主要指标达到省内先进水平,减污降碳协同增效作用初显;安阳市固体废物智慧监管信息平台上线运营,实现五大领域固体废物
随着互联网、大数据、人工智能等数字技术的发展和应用,推动社会经济以更细颗粒度的数据形式呈现,数据在软科学研究中发挥的作用也越来越大,为数据挖掘等提供了海量的样本数据,这使得建立基于数据驱动的研究范式成为可能,促使软科学研究范式由以往依靠专家驱动为主向数据驱动转变,更加强调运用数字
日前,宁夏印发《宁夏回族自治区建立碳足迹管理体系工作方案》。《方案》提出,宁夏到2027年,自治区产品碳足迹管理体系初步建立。聚焦有机化学品、机电产品、农产品等出口优势产业和特色产业,出台相关产品碳足迹核算标准,积极开展产品碳足迹核算。制定自治区碳足迹管理制度和评价通则,持续完善产品
2025年年初,高盛集团(GoldmanSachs)在其发布的报告中指出:电池储能系统(BESS)正成为全球电池市场的核心增长点。报告数据显示,BESS市场份额已从五年前的5%上升到2024年的25%,到2030年预计将累计装机3.2TWh,是市场此前预期(300GWh)的10倍,年复合增速达到70%。高盛判断,储能行业将走向更强的
在全球气候变化日益严峻的背景下,国家主席习近平于2020年在联合国大会上宣布了我国的“3060”目标,明确了碳达峰、碳中和(“双碳”)目标的内涵、基本路径和重点任务,“双碳”工作正式上升到国家战略层面。作为实现这一目标的基础性工作,碳排放核算体系的构建和完善尤为重要。碳排放核算是碳管理、
6月23日,国网河南省电力公司审计中心员工应用该公司自主构建的“电压等级-供电单位”双维度分析模型,高效梳理了所属18家地市级供电公司配电网投资规模与效能。应用该模型后,3名员工仅用1周即可完成过去15人耗时1个月才能完成的跨专业数据搜集汇总工作,且数据精准全面,审计质量和效率显著提升,更
2025年6月23日,工业和信息化部等九部门关于印发《黄金产业高质量发展实施方案(2025—2027年)》的通知,通知指出,高端新材料应用:半导体用高纯低碳金(银)靶材和蒸发料、太阳能光伏银浆料、低温共烧陶瓷和片式多层陶瓷电容器等核心元器件用金浆料、生物医用金(银)材料、电接触金(银)及合金材
据微信公众号“世界纪录认证”消息,截至2024年底,中国垃圾焚烧日处理能力达到116.6万吨按住建部城市生活垃圾焚烧处理工程项目建设标准,以垃圾焚烧炉理想年运行8000小时核算,年设计处理能力达3.88亿吨。经世界纪录认证(WRCA)官方审核,中国凭借116.6万吨/日的垃圾焚烧日处理能力,被确认为“垃圾焚
6月23日,上交所公布关于对江西沐邦高科股份有限公司及有关责任人予以公开谴责的决定。根据公告,因2024年度业绩披露问题,对江西沐邦高科股份有限公司、时任董事长、代董事会秘书廖志远、时任财务总监汤晓春予以公开谴责。具体来看:经查明,2025年1月24日,江西沐邦高科股份有限公司(以下简称公司)
6月24日,海南省自然资源和规划厅发布《关于规范光伏发电项目用地备案管理的通知(征求意见稿)》公开征求意见的公告,文件指出,引导光伏发电项目合理布局。项目选址应当避让耕地、生态保护红线、历史文化保护线、特殊自然景观价值和文化标识区域、公益林、天然林地、古树名木保护范围等;涉及自然保
张海峰欢迎袁明一行的到访,并对华为公司长期以来给予内蒙古电力集团的关注和支持表示感谢。他表示,双方一直保持着良好的合作关系,希望进一步深化合作,创新合作模式,实现互利共赢;积极参与电力集团“十五五”电网规划编制,在技术、机制、产业等方面给予更多支持;在电力信息通信、大数据平台、构
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!