来源：《中国国电》2016-09-18

分布式文件系统：基于 hdfs 的大数据存储和在线服务系统，同时支持erasure code以及hdfs文件加密。hadoop分布式文件系统(hdfs)是运行在通用硬件上的分布式文件系统。

来源：36大数据2016-08-23

其次，想要系统的认知大数据，必须要全面而细致的分解它，我着手从三个层面来展开：相关阅读：【推荐】面向全球能源互联网的电力大数据基础体系架构！...如果你说大数据就是数据大，或者侃侃而谈4个v，也许很有深度的谈到bi或预测的价值，又或者拿google和amazon举例，技术流可能会聊起hadoop和cloudcomputing，不管对错，只是无法勾勒对大数据的整体认识

来源：国家电网报2016-07-05

hadoop的数据存储和访问平台；根据未来应用需求，可以在现有原型基础上，扩大信息中心的规模、提升技术水准，进一步加强信息获取和分析以及专业研究能力。...该项目通过数据库设计，确定了合适的数据模型，定义了合理的数据结构以实现自动匹配和关联；开发了全球能源互联网原型系统，研究了数据中心的软件架构、硬件架构和应用架构，建立了基于关系数据库oracle和分布式海量数据库

来源：远光软件2016-06-16

远光数聚平台采用hadoop和spark核心技术，与传统平台相比，在数据采集、存储、安全及分析应用方面有明显的优势。对比日益成熟的大数据技术，企业业务模型的构建才是大数据应用的核心。...随着企业信息系统的日趋成熟和深入应用，系统数据呈现海量增长、动态变化等特征，企业对海量数据的深度挖掘和实时反映提出了更高要求。

来源：电力信息与通信技术2016-06-12

数据整合方面，主要采用hadoop体系中的flume、sqoop、kafka等独立组件；数据存储方面，在低成本硬件（x86）、磁盘的基础上，采用包括分布式文件系统、分布式关系型数据库、nosql数据库、...延伸阅读：【学术前沿】基于大数据运用的能源监管研究与实践 电力大数据平台技术架构电力大数据核心平台基于hadoop、spark、stream框架的高度融合、深度优化，实现高性能计算，具有高可用性，其技术架构如图

来源：电力信息与通信技术2016-06-08

可以借鉴一下他电力大数据平台技术架构电力大数据核心平台基于hadoop、spark、stream框架的高度融合、深度优化，实现高性能计算，具有高可用性，其技术架构如图3所示。...数据整合方面，主要采用hadoop体系中的flume、sqoop、kafka等独立组件；数据存储方面，在低成本硬件（x86）、磁盘的基础上，采用包括分布式文件系统、分布式关系型数据库、nosql数据库、

来源：环球网2015-12-08

除此之外，阿里巴巴的工程师们还有一套独特的绿色观那就是不断追求it系统极致的高性能和高效率。比如基础设施。...据说阿里正在张北建设百分百基于绿色能源的云计算基地，建筑外表覆盖太阳能电板，同时采用自然风冷和自然水冷系统。绿色能源可就地转化成计算资源，供全球使用。

来源：供用电杂志2015-10-30

数据仓库应用了hadoop和hbase，为电力公司统一展示用户属性、行为和趋势。该数据仓库现储存着超过7000万用户的数据和每年超过4000亿条的电表数据。...该平台将来自电力公司的用户系统、电表数据管理系统，客户关系管理(crm)系统，和第三方数据源的数据接入到数据聚合系统中，既包含了结构化数据也包含非结构化数据。

来源：供用电杂志2015-10-29

数据仓库应用了hadoop和hbase，为电力公司统一展示用户属性、行为和趋势。该数据仓库现储存着超过7000万用户的数据和每年超过4000亿条的电表数据。...该平台将来自电力公司的用户系统、电表数据管理系统，客户关系管理(crm)系统，和第三方数据源的数据接入到数据聚合系统中，既包含了结构化数据也包含非结构化数据。

来源：甲科数据2015-10-28

同时以yahoo、amazon为代表的工业界开发的 hadoop、hdfs、hbase等一系列开源技术产品，为大数据的收集和处理提供了技术保障。...如此惊人的增长与其深入挖掘用户信息推出的推荐系统密不可分。其推荐系统的本质正是通过对海量数据挖掘，以消费实体为单位，对消费习惯的深层次挖掘，预测，引导客户消费，以获取最大的经济效益。

来源：甲科数据2015-10-09

同时以yahoo、amazon为代表的工业界开发的hadoop、hdfs、hbase等一系列开源技术产品，为大数据的收集和处理提供了技术保障。...如此惊人的增长与其深入挖掘用户信息推出的推荐系统密不可分。其推荐系统的本质正是通过对海量数据挖掘，以消费实体为单位，对消费习惯的深层次挖掘，预测，引导客户消费，以获取最大的经济效益。

来源：电力系统自动化2015-09-11

安全认证作为信息安全的重要保障,应主要从系统主站防护、采集信道防护、采集设备防护、用户用电安全、安全管理等几个层面进行建设。...为实现海量互动数据在采集系统主站的安全高效存储,双向互动功能采用云存储设计思想,以用户为单位,利用mongodb存储每个用户数据的元数据信息,hadoop分布式文件系统(hdfs)存储实际数据,实现了对不同类型非结构化数据的有效存储

来源：睿商在线2015-09-11

此外，针对当前企业在发展新兴工作负载过程中对开源系统日益增长的需求，ibm通过一系列基于power8技术的power sco产品对hadoop、spark等开源大数据平台提供很好的硬件架构支持。

来源：电力系统自动化2015-09-11

安全认证作为信息安全的重要保障, 应主要从系统主站防护、采集信道防护、采集设备防护、用户用电安全、安全管理等几个层面进行建设。...为实现海量互动数据在采集系统主站的安全高效存储, 双向互动功能采用云存储设计思想, 以用户为单位, 利用mongodb存储每个用户数据的元数据信息, hadoop分布式文件

来源：供用电杂志2015-08-12

由于大数据处理的多样性和复杂性，学术界和工业界不断研究和推出新的大数据计算模式和平台;重要的发展趋势包括hadoop平台与其他计算模式的融合、多样性混合计算模式、基于内存的大数据处理技术。...2.智能配用电大数据总体框架配用电大数据应用系统总体架构分数据资源、数据处理、公共服务、业务应用4个层次，见图1。

来源：供用电杂志2015-08-11

由于大数据处理的多样性和复杂性，学术界和工业界不断研究和推出新的大数据计算模式和平台;重要的发展趋势包括hadoop平台与其他计算模式的融合、多样性混合计算模式、基于内存的大数据处理技术。...2.智能配用电大数据总体框架配用电大数据应用系统总体架构分数据资源、数据处理、公共服务、业务应用4个层次，见图1。

来源：比特网2015-07-09

oceanstor 9000专为大数据应用设计，基于分布式文件系统提供的标准hdfs接口，可无缝对接hadoop上层应用 , 支撑海量媒体内容存储的同时，还可以支持智慧新媒体平台构建一站式大数据方案，为用户行为分析

来源：比特网2015-06-25

这也是继清华大学hadoop大数据项目、北大信息学院大数据研究项目和北京交通大学hpc项目之后，华为服务器又一次突破985院校的重大科研项目。...在运维管理方面，通过批量更新和下发相关系统升级补丁，极大提升了运维管理效率，为运维部门带来极大的便利。

来源：51CTO2015-06-23

举例来说，kafka分布式消息系统被广泛描述为一款大数据必需的新型工具产品。不过与其它消息系统比较起来，它的功能集显得非常孱弱而且还远称不上成熟。...它的规模扩展能力出色，不过大家可能需要准备好多种工具来将hadoop与sql加以匹配。

来源：比特网2015-06-18

例如半结构化、非结构化数据处理要引用nosql、newsql，甚至hadoop等新兴数据处理技术。而进入数据管理层面，需要经历孤立系统、数据集市、数据仓库以及统一元数据仓库等几个阶段。...iuap udh是基于hadoop发行版的一个封装，里面除了提供大部分的hadoop生态系统组件之外，还包括用友自主开发的hadoop企业管理器。