北极星

搜索历史清空

  • 水处理
您的位置:电力综合正文

内存计算技术验证项目与应用研究

2012-11-05 10:06来源:北极星电力软件网关键词:电力信息化ERP智能电网收藏点赞

投稿

我要投稿

应用的情况,我们选取了六个主要的系统,比如说ERP场景有21个,BW营销,JIS,MIE,这个数据量也是非常大。

帐卡一致,整个数据量都有,我就不念了,但是节省的空间以及倍数,到行排出来的数足以说明速度相当快。我当时对这个数还不太信,因为是在测试机环境下测出来九秒钟就出来,出来我说这不对,这怎么这么快,我到生产机比较一下,生产机也很快,现在看来帐卡一致的数据标准比较符合列存储的权限,这个反复验证没有什么问题。还有物资类采购排名,现在国网公司天天考核,月月排名,我们各个网省领导对排名非常重视,我们查询了各个运行情况,包括在生产性研究,以及应用,实际提升的倍数到其他方面,这个都是很明显的。

总的效果,在数据库的查询性能一般可以提高100-300倍,最高是350倍,分析报表的查询展示能够提高20倍,这也是被去年验证完成了。今年以来我们做了一些场景迁移,把原来380换成了DL980,内存是一个T,固定硬盘1.28T,8核都上了,很明显速度都加快了,这都有具体的数据。

场景迁移分析效果也是比较清楚的,当然这个比较好的环境应该上两台并发,前面3850搞四台,这样可以高速增长,很多数据仓库推进去,处理完就可以解决,今年国网公司重点是三机五大,别的工作让路,根本没有条件,在非常困难的条件下也做了,这一些需要条件,有的做出来就得需要做到,你别人做不了。我们迁移到这个环境去做的时候提升了下降了一些具体曲线,还有具体分析。比如说项位成本在3.5一台情况是30倍,迁移到DL980达到100多倍,这些数都有,这些数还有大量的数据在支撑,每一个场景都有。

在包括迁移,利用空间节省的倍数也都有,我就不在细说了。这是具体迁移到3850两个环境下,当时在3850的时候提高的倍数,980提高的倍数,一个是水平提高一点,另外主要是硬件平台换了,如果两台就更好了。

这个20就是我们第20个场景,在查询所有36个上线全部资产设备12.2G情况下,从去年从9.8G加到12.2G,原来是9秒钟,加上这个设备变成7秒,也是加快了,这是相比分析的一些数据情况。

有一个想法跟大家分享一下,因为今天主题是大数据。其实IPV6给我们支撑智能电网或者我们搞电力云或者云计算提供了非常好的基础,包括物联网也有可能,因为这样不用树状结构,因为IPV6是360个件,这个量太大了。他为基础去组织,去和我们所有的设备,不管大的小的设备,他有一个名直接查,而不用通过民航局查到省市县了。我们智能电网既是使用支持,其实也是一个物联网一个特殊类型,这样云计算到数据中心变真实的。这个数据到现在为止我们数据中还没有达到企业级的规范和标准,但是确实经过几年努力大量结构数据出现了,专业的数据也出现了,为今后形成做了准备。谁能说清楚国网到底多少接口,省里面多少接口,顾问都走的时候谁能说明白,这个很困难,大数据带来的问题是不少的。

当然集中起来量大了,这就要处理。因为海量数据,历史数据,因为实时数据库和结构化不一样的,实时数据库需要测点数据库,他有特色背景,应该怎么样归类,但是基础工作很重要。这里面有一个典型的图,只有这些达到了我们数才能起来,规范的数据出来,我们才能起作用,对推动最现代化的电网建设才能真正发挥作用。当然到云上面也是一样的,云有各种各样的,就企业来说自己内部横向到边,纵向到点,但是要有序的排列,而不是堆积。我们现在数据中心和海量数据库存下来大多数都是堆积,过几年看不着。我记得那一年和刘主任上法国去,我去他们那看,人家86年调度的图调出来,我们连82、83年都调出来,你查尺信息中心数据能不能出来,多少有用的,因为编程信息的时候才是有用的,因为信息是有价值的,是在实际可以创造价值的。否则你数据存下去要不提出来什么也不是,跟垃圾没有什么区别,所以数据质量,管理标准很重要,达到一定量的时候要处理,我说技术新的规范标准不解决也照样还不行。

最后我写了两首数据顺口溜,一个是叫内存计算技术,数据读取内存间,行列存储混计算,虚拟创建优模型,并行高效百倍翻。验证场景百余篇,应用跨越二十全。时空飞越千万倍,内存计算奇惊天。

物联网与云计算,虚实物物网相联,物景秒越时空关。千里林海横竖列,万物时间换空间。实物虚拟千百件,众物成池越海川。海量信息存知己,星球惊现云计算。

投稿与新闻线索:陈女士 微信/手机:13693626116 邮箱:chenchen#bjxmail.com(请将#改成@)

特别声明:北极星转载其他网站内容,出于传递更多信息而非盈利之目的,同时并不代表赞成其观点或证实其描述,内容仅供参考。版权归原作者所有,若有侵权,请联系我们删除。

凡来源注明北极星*网的内容为北极星原创,转载需获授权。

电力信息化查看更多>ERP查看更多>智能电网查看更多>