北极星

搜索历史清空

  • 水处理
您的位置:电网信息化云计算综合正文

高宽带、大数据 成就智能电网

2012-11-05 10:18来源:北极星电力软件网关键词:电力信息化大数据智能电网收藏点赞

投稿

我要投稿

就以数据中心的交换机为例,我们当时去的时候跟客户交流,一般目前可能在一个数据中心里面五千台左右是一个极限的,在传统数据中心交换机设计的思路里面,他从千兆也好,万兆也好的接入到相互之间的互联有一定的收敛,因为传统的业务是基于梳树状的下面和上面有来往,但是相互之间比较少。我们这两年P2P的兴起,迅雷也是随时可以上市。这其实要求一个什么呢?每一个端点和其他端点要做到端到端的线性研究,现在可能还有一个动态的概念架构,通过这种架构可以实现上万台服务器互联,这样相互之间的数据快速移动,才能使得网络变成无阻塞的。在吉林石油我们通过最高端能够提供1150个实际接口,在数据中心要做云化,做石化,很重要要虚拟化,这才能实现自动化,才能实现数据和资源的迁移。传统来说迁移是需要通过走到三层,IP地址的变化来实现,IP地址变化走到三层就慢了,能不能走二层迁移呢,这对下面IP网络提出来一个考验。目前应该说在等等一些技术上都实现二层,我们叫大二层组网,整个网络从二层到三层又回到二层了,应该说在这个上面我们通过开放的协议来进行交互,用户因为现在好多业务还没有完全确立下来,所以要求开放的业务体系。应该说这一块是最后导致思科没有进入这样一个项目里面。

我这里面讲一下吉林石油在大数据处理,首先对网络做一个要求,宽带中国核心宽带要宽,对于电力来讲华为这十几、二十年服务电力,首先说在网络领域做了很大的工作,在这张图里面稍微显得零乱一些,但是从层次上来说比较简洁,应该说这些年建设国网整个从传输层面也好,数据层面也好都实现了双网的冗余,在各地骨干层面还是实现了宽带中国超前一步的运营梦想。目前无论是国网还是南网在配电自动化和用户信息采集最后一公里可能面临跟中国电信,中国移动一样的阶段,在这一块可能在智能化,互动化,配网自动化这一块也在加强。当然在华为这一块,在接入这一部分也做了大量的工作,在这一块可以通过工业交换机或者无线网络,在这些方面甚至我们也做了一些结合底层的低速接口,在这些设备上的定制。

目前在超长距离传输这一块可以做到270公里,加上摇泵可以做到380公里,应该说这个对降低维护量,实现整网大数据高速传输提供了保证。

在OTN传输层面,目前可以做到单波100G,30波的速率,在这一块上,在通信整个领域我们传统的主要的友商,爱立信,摩托,北电逐渐消失我们的视野,在欧洲这一块,但是欧洲厂商也有一个好处,我们喜欢跟他合作或者说是竞争。我觉得爱立信的东北亚副总讲希望在开放公平的环境下跟华为一块为客户服务。

下面跟大家分享一下大数据除了传以外在存和用这一块需求,这一块简单过一下,我后面想跟大家简单看一下案例。在存这一块应该说数据量的增大需要整体的吞吐量的提升,包括他容量的一个增加。我们刚才讲的数据分为结构化和非结构化,结构化应该说传统上都是用块级访问,非结构化后面又会分别通过大量的文件系统或者说大量的对象数据的接口来进行访问。在这一块上,块一级的对于高速单业务低顺延的要求,我们可以通过高端存储来做,目前华为16控高端存储也在我们全国的住宅联网里面系统。UDS,分步式的我可以结合大爆炸分享一个案例。中间这一块,基于文件访问应该说我们大量的数据存在一些从非结构化到结构化的一个数据清洗的过程,要结合一些业务的建模,这样你才能真正把BI的模型,把大数据挖掘的模型建立起来。同样一堆数据,针对不同的业务,针对不同的行业可能能产生的价值也都是不一样的。

我们刚才把传和存讲了一下。第三个就是要用起来,实际上还是要靠算,要靠怎么算呢?以前我们讲网格计算也好,分步式计算也好,跟云计算有异曲同工之妙的,不管通过什么方式都需要为整个的大数据的挖掘,大数据的数据处理提供一个强大的心脏。我们看NBA讲关键球员的能力,就是最后有一个大心脏,能够带领球队取得胜利。华为公司目前投入六千人的研发,这在全球都是比较大的投入,六千人的研发来做什么呢?来做云计算的云操作系统,虚拟化的软件平台。包括整个华为使用桌面云系统,这是实现最直接的办公OA的应用。在这个基础上要实现有效的安全保证,从接入到网络到后台的业务应用,还有要结合ITO的管理,昨天有领导讲ITO的管理,结合这一块建立整个运维的体系。

当然在这个基础之上需要通过业务建模和数据清洗,针对不同的行业作相应的数据挖掘,这里面也离不开大量的合作伙伴,包括行业的,比如说在电力跟南瑞等等也在开展合作,他们在具体业务上理解比我们更深入,华为在基础的平台上,在自己的电气工程这个领域上会贡献自己更大的力量。

最后是几个案例,我今天在第一张图上也给大家展示了一个宇宙大爆炸的图,应该说这是我们认为由于宇宙大爆炸产生的后续的过程,才是一切的源起,包括大数据。这里面我们讲,我们说云计算,云储存发现上帝粒子。什么意思呢?欧洲原子能机构,这个机构在今年八、九月份发布了非常震惊科学界的消息,就是说他们证实了这个希格斯玻色子存在,他们有一个大型探测机器,他通过这个探测器和一个强子对撞机,我们右边图就是这个对撞机,看到像动车里面一节一节车厢一样。在这个对撞机里面放了三千万亿个基本粒子,这比原子质子更往下走,他做实验的时候每秒能产生六亿次对撞,实际上相互相撞级别还是很低的,这六亿次对撞产生的原始数据有50个TB一秒钟,他不可能一天24小时都做,就这一秒50个TB数据量就非常大,这个数据量产生之后需要通过欧洲原子能机构以及分支机构通过云计算的方式来计算,通过原始数据计算,这个计算完了以后再来论证原来的理论是不是真实的,因为实验产生的数据是真实的,但是真实的数据要去看整个理论是不是合适的。

通过他们这一套发现原来理论上存在,但是没有抓到看到的。到了今年8月份以前,还有最后一种粒子被理论存在,但是没有发现过的,这个粒子就是希格斯玻,这是爱丁堡大学一位物理教授,之所以称之为最后,就是最后发现的粒子。搞清楚这个例子对研究整个人类的宇宙的起源是有帮助的。

很有幸我们通过路透社报道,原来我们华为公司给他提供这里面云计算和云存储,尤其是云存储这一块。我们想每一秒50个TB,传统任何存储都放不下这个东西,无法处理这个东西。随着实验横向的线性增加一些东西的时候,增加容量和性能的时候,这也是一个恐怖的事情。包括他要全球联网来实现数据的一致性,还要实现任务的分步式的发布,这个时候数据的完整性和一致性也是对系统产生了非常大的考验。

华为在整个云计算,云存储这一块,早在大概2010年的时候就开始来做,就在上海的电信E云,为什么叫E云,最开始合作是EMC和上海电信做的,他目标是给上海2000万市民每人提供100G空间,在这个空间上你可以存你个人的照片,也可以作相应东西的备份,包括在上面游戏、社交等等一些东西。在分步式这一块,通过20兆上行用户来开展这个业务,但是分步式这个东西,包括中国区域有一定定制的业务特点,让国外的厂商来说还是非常痛苦的。这个时候我们中国自主可控这个特点就出来了,我们可以结合业务来优化性能,提高实验。

投稿与新闻线索:陈女士 微信/手机:13693626116 邮箱:chenchen#bjxmail.com(请将#改成@)

特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。

凡来源注明北极星*网的内容为北极星原创,转载需获授权。

电力信息化查看更多>大数据查看更多>智能电网查看更多>