登录注册
请使用微信扫一扫
关注公众号完成登录
我要投稿
在11月30日-12月1日举行的电力行业信息化年会上,阿里巴巴数据库负责人周宝方做题为《阿里“去IOE”战略》主题演讲,分享了阿里巴巴在去IOE过程中的经验与技术演变。以下为文字实录。
阿里巴巴数据库负责人周宝方
大家好,我先简单介绍一下自己,我在阿里的花名是后羿,在阿里大家知道花名文化,在我们内部通常用花名相互称呼。就像刚才刘总介绍的,我过去十多年主要是数据库方面做一些事情,过去四年主要做一件事帮助阿里实现去IOE,今天重点讲阿里从以前的基础架构,碰到的问题及演变。
首先简单介绍阿里过去几年做预算过程当中一个指导原则,很多人可能不是很清楚,为什么把这个提出来?其实每年年底我们在做完双十一,双十二之后,随机起动一件工作,从集团层面做未来一年预算制定和规划,我们会把预算计划提交我们CTO内部去,其实不是简单对这中间财务做盘点,而是未来一年整个案例技术走向、产品规划中间来做一个系统性盘点,所以其实去IOE也是来自于我们那一年预算盘点。
2010年我在淘宝,当年做预算时候,我和我老板在制定预算初稿过程当中,提那么一句,我说我们现有这种系统架构采用了大量的IOE系统,其实我们可以来尝试一下用非主流方式,比如说PC来逐步替代我们架构,当时只是在预算初稿当中提一句,但我们CTO是希望能够明确写下来,作为我们未来几年预算很重要基点,并且提出来说既然有这么考虑,不妨我们就决心迈更大一点,以后再也不采购小型机,这整个过程作为阿里去IOE发端,一会儿也会讲到。
作为第一年也就是2010年,刚才说预算2009年年底,2010年时候我们制定指导原则主要是解决小型机问题,这里中间提出来,在去小型机过程中我们也提出逐步积累,对于数据库、以及EMC高端存储经验积累。大家看2011年时候,其实从我们整个一个去IOE来讲,去小型机技术已经掌握,2010年时候全面推动,IOE全面技术替换,背后主导思路希望回归互联网根本,以互联网技术解决电子商务性应用场景解决。
2012年时候,我们基本上解决了当时淘系主流核心应用场景的去IOE工作,随着后期我们对支付宝、B2B以及阿里整合过程当中,整个团队上升到集团层面来全面推动,在各个领域来推动战略。
2013年时候大家可以看到我们已经不再提去IOE,我们内部已经基本上把这些问题已经解决了,剩下其实已经只是一些长尾,或者一些小应用,那推动云计算战略,或者更多让内部IT逐步对接到云计算平台上来。
那经历这几个阶段,大家看一下阿里自身技术经历了几个阶段,从最初商用技术,IOE,商用技术,在我们企业发展一个起步阶段,是以金钱来换取时间,随着后期自身技术积累一定程度,我们逐步考虑以自身技术来解决这些问题,从最开始开源入手逐步过度到自主技术,当自主技术逐步成熟时,自主技术逐步往云计算平台走,最终云计算支撑整体庞大业务。后期无论是开源或自主技术也好,云计算平台是我们阿里主流的一个技术基础。
刚才从过去4年我们预算指导原则角度来让大家看到,整个这几年我们技术发展的一个演进主线,现在归到去IOE整个历程,这张图可以看到,网上也有照片发出来,这是一个传统IOE架构,这个架构大家可以看到基本上每个公司大同小异的,在这里我们可以看到,这里前面是,中间一排黑色小型机,中间是网络设备,在下面一层,这是高端存储。这里一台小型机,IBM小型机差不多500万到600万之间,在下面是高端存储,拿IMC来说,一台价格大家也猜一下,也同样差不多价钱。我们这个核心系统,每一台如果正常跑起来,都需要做HA,必须让这个设备再乘以2才能够跑下去,这是常规配置,你还没有提业务发展过程当中你需要对接数据仓库,还没提到软件费用,以及这中间互联过程当中这中间交换机,以及对网络端口占用和带宽,以及IDC额外付出这些费用。
从淘宝应用角度来看,最初淘宝在发展之初所有应用都放在几个集中库当中,随着业务快速发展,这中间有一些商品系统发展非常快,每年是以翻一番速度增长,我们首先在这里碰到瓶颈,怎么解决?最初尝试垂直拆分,我们以应用的纬度来逐步把应用放到各个库当中去,每个库基本上是以IOE价值来支撑,那这中间还有一些体量大的应用,比如说像交易、商品、店铺、用户,他们发展速度非常快,尤其以商品库为主,我们解决垂直拆分发现还没有解决问题,类似于像商品还在每年翻一番速度增长,意味着第一年要一拆二,第二年二拆四,再往后每年再翻一番,这里列出很少一部分,大家可以看每一个点刚才500、600万加500、600万乘以2,再乘以上面很多软件费用,大概是2000多万一个结点,如果大家考虑整体规模到最后几何奇数往上长,如果是这样走下去的话,其实企业发展利润基本上保护费已经交出去了。
那回归到我们去IOE的核心原因,首先是说为什么我们做重大决定?大家可以看到,IOE这种体系他是一个强大单点,这个点他处理能力很强,似乎看起来也具备很强这种稳定性,扩展能力也还可以,但是你可以想到如果说是整个一个淘宝,这么大应用,都依赖于一台机器,一两台机器,网络他会出现波动,我这个电源也有可能被拉闸限电,或者CPU都会出现问题,如果出现这种问题,你要影响到用户稳定,如果以这种体系一个库里面,比如说1亿两亿用户,相当于所有鸡蛋都放在一个篮子里,影响面相当大的,这其实是我们最初,在稳定性方面所面临的一个非常急迫问题,一个点出现任何波动影响面都会非常大。
特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。
凡来源注明北极星*网的内容为北极星原创,转载需获授权。
2024年12月12日,由IEEEPES电力系统通信与网络安全技术委员会(中国)主办的2024年电力信息通信与网络安全学术会议暨IEEEPES电力系统通信与网络安全技术委员会(中国)年会在北京召开。围绕会议“信息通信创新#xB7;赋能电力行业高质量发展”主题,华为重点展示了面向新型电力系统打造的主配一体化通信
11月16日-17日,由中国电机工程学会电力信息化专业委员会主办的2024电力行业信息化年会在南昌成功举办。飞腾公司作为国产CPU领军企业受邀出席本次会议,并携手众多生态合作伙伴全方位展示了飞腾在电力数字化、信息化领域的丰硕成果。中国工程院院士、中南大学校长李建成、国家电网有限公司信息通信分公
近日,由中国电机工程学会电力信息化专业委员会主办的“2024电力行业信息化年会”在江西省南昌市召开。本次年会以“乘×数而来,智+享电力”为主题。在本次年会上,华为携最新的基于fgOTN(细颗粒光传送网)技术的电力通信网解决方案亮相,致力于为电力打造骨干网更宽、配用电覆盖更广、台区更透明的电
“在双碳目标下的新型能源体系,数字基础设施和数据资源体系被视为建设数字能源的‘两大底座’,而新华三能够依托“数字大脑”的全栈创新和技术积累,给能源行业场景化变革创造更大空间。”2023年4月14日-15日,由中国电机工程学会电力信息化专业委员会与国家电网有限公司信息通信分公司联合主办的2022
2023年4月14日-15日,以“低碳数字新动力,电力转型新发展”为主题的中国电机工程学会电力行业信息化年会在湖南长沙隆重举行,电力信息化专业委员会经过20多年发展,已经成为电力系统内最具影响力的信息化专业品牌盛会。本次会议围绕“双碳”发展战略、数智随行、新型电力系统、能源清洁低碳转型、云网
“超云的价值主张就是‘让数据中心更简单’,我们也是围绕这个理念去打造自己的产品和解决方案。”2023年4月14日-15日,由中国电机工程学会电力信息化专业委员会与国家电网有限公司信息通信分公司联合主办的2022电力行业信息化年会在长沙召开,长城超云(北京)科技有限公司(以下简称“长城超云”)产
“国内芯片企业也要懂行业应用,更好地助力能源行业信创和数字化转型融合发展。”2023年4月14日-15日,由中国电机工程学会电力信息化专业委员会与国家电网有限公司信息通信分公司联合主办的2022电力行业信息化年会在长沙召开,飞腾信息技术有限公司(以下简称为“飞腾公司”)副总经理张志群在与北极星
2023年4月14日-15日,由中国电机工程学会电力信息化专业委员会与国家电网有限公司信息通信分公司联合主办的2022电力行业信息化年会在长沙召开。中国电机工程学会秘书长王刚,中国电机工程学会电力信息化专委会主任委员、中国工程院院士、中南大学校长李建成,中国工程院院士郑纬民院士,中国工程院院士
2023年4月14日-15日,2022电力行业信息化年会在长沙召开,本届年会以“低碳数字新动力电力转型新发展”为主题。300余位行业代表深入探讨新形势下,能源电力行业企业所面临的新的机遇和挑战,聚焦低碳、数字技术双轮驱动所带来的巨大的创新空间和市场价值。如何使能电力行业数字化转型,和电力行业并肩
秉承着“让数据中心更简单”的企业理念。数字化时代,长城超云也将继续为能源及各个行业提供稳定可靠、安全可信、可持续创新的产品与服务,助力客户快速组建强大的数字化平台,重构数字化生产力,提升业务价值。
当前,在市场需求与政策利好的双重驱动下,企业数字化转型已成新的发展趋势,基于自主操作系统和国产化CPU信息化、数字化建设成为企业数字化转型过程中必须解决的难题之一。今年的《政府工作报告》更是着重指出,要“加快数字化发展,打造数字经济新优势,协同推进数字产业化和产业数字化转型”。作为自主操作系统的代表厂商,统信软件与行业发展同步加速,为企业数字化转型加油助力。
通过培训、交流,最近不断接触国网、南网、发电企业、工程企业等各类能源企业,战略转型成为这些企业经营决策层的一种共识。但是就实际而言,这些企业大多还是沿袭着原有的惯性在运行,大量新业务也只是套了新业务的名字,干的还是老业务的事情。(来源:微信公众号“鱼眼看电改”作者:俞庆)比如电网
通过培训、交流,最近不断接触国网、南网、发电企业、工程企业等各类能源企业,战略转型成为这些企业经营决策层的一种共识。但是就实际而言,这些企业大多还是沿袭着原有的惯性在运行,大量新业务也只是套了新业务的名字,干的还是老业务的事情。比如电网企业的综合能源服务,更多的是工程系统建设而非
通过培训、交流,最近不断接触国网、南网、发电企业、工程企业等各类能源企业,战略转型成为这些企业经营决策层的一种共识。但是就实际而言,这些企业大多还是沿袭着原有的惯性在运行,大量新业务也只是套了新业务的名字,干的还是老业务的事情。(来源:微信公众号“鱼眼看电改”作者:俞庆)比如电网
一、前言能源互联网这个概念的提出,好像已经有两年时间了,这个词在国内似乎比国外要热一些,Google上InternetofEnergy的搜索结果和InternetofThings相比也少不少,IoE关联的公司也都是些小公司,和IoT的各种高大上不能比。类似互联网精神,都是出口转内销的成分大一些。即使在国内,最近能源互联网这
俞庆老师的大名,能源圈的朋友都很熟悉且仰慕了。结合这些日子火热的售电进程,今儿小编特别选取了俞庆老师首发在《环球表计》9月刊的专稿。因为文稿篇幅较长,将分上、下两部分发表!能源互联网、能源大数据、售电的未来(上半部分)随着电改的推进,特别是售电侧市场的逐步开放,售电业务逐步成为各
俞庆老师的大名,能源圈的朋友都很熟悉且仰慕了。结合这些日子火热的售电进程,今儿小编特别选取了俞庆老师首发在《环球表计》9月刊的专稿。因为文稿篇幅较长,将分上、下两部分发表!-售电、能源大数据与能源互联网的未来-(上半部分)随着电改的推进,特别是售电侧市场的逐步开放,售电业务逐步成为
我们不会采用最新的技术,我们需要的是稳定性、可靠性,我们所采用的系统必须是验证过的,被证明是稳定可靠的系统方案。这某电力行业CIO接受采访的原话。总之,电力行业给人的印象是非常的保守,程度超过金融和电信,市场相对封闭。你能够想象吗?这样的一个用户竟然率先完成了分布式系统测试和部署。
互联网发展将近二十年形成了互联网产业,持续的互联网创新、创业才有了云计算,如今云服务更是成为一种互联网创业模式。云计算也正一步步晋升为巨头们最大的收入来源之一。今年亚马逊的数据显示,AWS已经成为亚马逊增长最快的业务部门,平均每季度带来数亿美元利润。阿里巴巴公布的2015年第三季度财报
一、能源互联网狭义定义与技术理解和物联网的英文InternetofThings(IoT)类似,能源互联网的英文为InternetofEnergy(IoE),从中文翻译看,直译为能源互联网亦非常贴切。对于能源互联网概念的理解,百度百科的解释如下:能源互联网可理解是综合运用先进的电力电子技术,信息技术和智能管理技术,将大量
导读:软银赛富的阎焱曾经说过:互联网的本质,从经济学上来讲,是打破中介,减少中介费用。其实这种对互联网本质的认识,是从广义而非狭义的角度去理解的,而如果把这种视角观照于电力市场特别是售电侧的当下与未来,就能发现能源互联网在其中将会发挥的巨大作用和机会。而从作用效果来看,又可以分为
伴随着国家电网的IT架构演变历程,作为国家电网直属单位的南瑞信息系统集成公司(以下简称南瑞集成)在虚拟化和云计算领域进行了深入的探索,历经了传统架构到虚拟化再到软件定义数据中心(SDDC)的演变。在本文中,南瑞集成CTO徐戟深度介绍了国家电网的软件定义数据中心应用实践。数据中心变革的动力是什
新一轮电力体制改革10年来,南方区域勇担改革“试验田”使命,大胆探索、稳步实施,以广东起步开展现货市场试点,以省域市场积累的宝贵经验助力区域市场建设,为全国统一电力市场体系建设作出积极贡献。南方能源监管局以监管促改革、以创新破难题,为南方区域电力市场从无到有、从省内到跨省协同的跨越
在发展数字经济与实现“双碳”目标的背景下,人工智能技术的爆发式增长正引发算力需求的指数级攀升。工业和信息化部数据显示,截至2024年9月底,我国在用算力中心超过880万标准机架,算力总规模达268EFLOPS(每秒百亿亿次浮点运算次数)。中国信息通信研究院《中国绿色算力发展研究报告(2024年)》显
近期,中能建、中电建、浙江新能、中润光能集团、京能国际、森特股份发布招聘信息,北极星整理如下:中能建建筑集团有限公司(下称公司)成立于1952年,总部位于合肥市,是世界500强特大型能源建设央企中国能源建设股份有限公司(下称中国能建)旗下唯一房屋建筑专业化平台公司,是新中国成立七十周年
2024年12月12日,由IEEEPES电力系统通信与网络安全技术委员会(中国)主办的2024年电力信息通信与网络安全学术会议暨IEEEPES电力系统通信与网络安全技术委员会(中国)年会在北京召开。围绕会议“信息通信创新#xB7;赋能电力行业高质量发展”主题,华为重点展示了面向新型电力系统打造的主配一体化通信
11月16日-17日,由中国电机工程学会电力信息化专业委员会主办的2024电力行业信息化年会在南昌成功举办。飞腾公司作为国产CPU领军企业受邀出席本次会议,并携手众多生态合作伙伴全方位展示了飞腾在电力数字化、信息化领域的丰硕成果。中国工程院院士、中南大学校长李建成、国家电网有限公司信息通信分公
近日,由中国电机工程学会电力信息化专业委员会主办的“2024电力行业信息化年会”在江西省南昌市召开。本次年会以“乘×数而来,智+享电力”为主题。在本次年会上,华为携最新的基于fgOTN(细颗粒光传送网)技术的电力通信网解决方案亮相,致力于为电力打造骨干网更宽、配用电覆盖更广、台区更透明的电
10月27日晚,海联讯发布公告称,杭州市国有资本投资运营有限公司(下称“杭州资本”)作为公司控股股东和B股上市公司杭汽轮的间接控股股东,拟筹划海联讯和杭汽轮进行重大资产重组,公司A股股票自10月28日(星期一)开市起停牌,预计停牌时间不超过10个交易日。截至目前,本次交易仍处于筹划阶段,交易
前两年参加某AI活动,一位国家电网的专家分享道:“领导嘱托我一定要来跟大家做一个分享,电力行业虽然已经有百年传统,但我们国家电网非常渴望技术创新,非常渴望将AI在这么大的电力系统中去应用。”为什么电力行业对智能化的需求如此迫切?因为时间紧,任务重。以新型电力系统支撑碳达峰、碳中和,是
8月29日,由中国电机工程学会电力信息化专业委员会与中国能源研究会能源大数据专业委员会联合举办的“第七届电力大数据协同创新论坛”在贵阳召开。论坛以“激活数据新动能,赋能新质生产力”为主题,旨在推进算力、算法、数据及应用资源的集约化与服务化创新,助力电力行业的数字化升级和产业转型。紫
中核汇能贵州能源开发有限公司(简称中核汇能贵州公司),于2022年2月14日在贵阳注册成立,属于中核汇能有限公司/新华水力发电有限公司省级区域子公司。下辖集控中心、电力营销中心、5大区域检修中心、2个分公司和19个项目公司,资产总额超过100亿元,员工总数300余人。截至2024年4月,公司实控总装机
6月25日,据悉,国网天津电科院荣获2024年能源网络安全大赛暨能源网络安全和信息化大会二等奖并获优秀技能战队称号,该院牵头申报的“电力网络安全未知威胁感知和精准防御关键技术及应用”成果荣获大会优秀案例。电科院高度重视本次赛会,在公司数字化部指导下,积极开展决赛备战工作,并在比赛期间积
请使用微信扫一扫
关注公众号完成登录
姓名: | |
性别: | |
出生日期: | |
邮箱: | |
所在地区: | |
行业类别: | |
工作经验: | |
学历: | |
公司名称: | |
任职岗位: |
我们将会第一时间为您推送相关内容!