MapReduce

类别：来源：电子发烧友2018-05-22 10:01:36

所以现在国内现在新兴的电网海量实时数据系统，其核心数据库大都采用了hadoop的hdfs系统，通过使用分布式数据存储和mapreduce运算模型，来实时存储如此巨大的数据。这和淘宝网的数据库是相似的。

类别：电力通信来源：前瞻产业研究院2017-11-27 10:07:45

中间层是类似hadoop、mapreduce的数据分析软件，原有的软件产业也要转型，由卖软件转为以数据为中心。再往上就是百度、腾讯、阿里巴巴等大数据应用服务公司，需要增加数据分析的效用。

类别：来源：国能日新2017-07-31 09:32:15

基于hbase作为mapreduce后台数据源，以支撑离线分析应用，运用redis实时加载主键索引及设备数据。

类别：智能变电站来源：电力信息与通信技术2017-03-10 14:45:32

mapreduce模型如图1所示。图1 mapreduce模型fig.1 mapreduce model整体来说,大数据挖掘技术在新一代智能变电站变电设备状态监测与评估中的应用还处于起步阶段。

类别：云计算来源：i黑马2016-10-11 11:45:34

一拨要从零开始打造自己的大数据底层技术，把 mapreduce、gfs、bigtable 这些组件都要实现一遍，结果花了两三年时间，也没能稳定运行。

类别：电力通信来源：北极星输配电网整理2015-09-07 10:32:56

大数据分析常和云计算联系到一起，因为实时的大型数据集分析需要像mapreduce一样的框架来向数十、数百或甚至数千的电脑分配工作。下文是中国报告大厅小编整理的大数据行业的定义及用途分析。

类别：来源：中国报告大厅2015-07-23 15:00:17

大数据分析常和云计算联系到一起，因为实时的大型数据集分析需要像mapreduce一样的框架来向数十、数百或甚至数千的电脑分配工作。下文是中国报告大厅小编整理的大数据行业的定义及用途分析。

类别：来源：36Kr2015-06-12 14:34:03

然后，过了几年，google会时不时公布1、2篇相关技术的论文，开源界就会开始山寨google的技术，很多技术都是这样，如mapreduce催生了hadoop，bigtable公布出来后，一大堆nosql

类别：能源服务来源：cnblogs2015-05-27 08:36:23

google整个的软件构架都是基于各种各样的分布式系统，诸如borg、 mapreduce、bigtable等。正是这些分布式系统，使得google可以处理高并发请求响应以及海量数据处理等。

类别：来源：电工学习网2015-05-19 14:31:39

mapreduce模式的思想是将要执行的问题分解成map(映射)和reduce(化简)的方式，先通过map程序将数据切割成不相关的区块，分配(调度)给大量计算机处理，达到分布式运算的效果，再通过reduce

类别：云计算来源：码农网2015-01-15 10:35:32

mapreduce是当前云计算主流并行编程模式之一。mapreduce模式将任务自动分成多个子任务，通过map和reduce两步实现任务在大规模计算节点中的高度与分配。

类别：物联网来源：比特网2014-08-26 10:38:00

在分析层面，除了传统的sql和mapreduce之外，还引入了最新的图形分析引擎，能够处理大规模分析图表查询以及预建图形功能，并可以应用到客户流失、产品关联性、欺诈侦测以及推荐引擎等分析场景。

类别：发电信息化来源：大云网2014-07-29 10:55:15

它包括common、distributedfile system、mapreduce三个组件部分。...hadoop的 map/reduce 框架是一种主/从架构，机群中有单一的主服务器以及若干个从服务器，在每个节点都有一个从服务器，这些分布式的节点协同工作，共同完成一个整体的大数据处理任务。

类别：电网信息化来源：OFweek物联网2014-03-24 09:42:18

该技术和mapreduce一样，具有强大的批处理能力，而且impala对于实时的sql查询也有很好的效果，通过高效的sql查询，你可以很快的了解到大数据平台上的数据。...该技术采用内存计算，从多迭代批量处理出发，允许将数据载入内存做反复查询，此外还融合数据仓库、流处理和图计算等多种计算范式，spark用scala语言实现，构建在hdfs上，能与hadoop很好的结合，而且运行速度比mapreduce

类别：火电动态来源：中国储能网新闻中心2014-03-05 11:42:44

从samza到百度云，从hadoop的mapreduce到mongodb的nosql，我们的生活早已遍布大数据的应用。

类别：来源：中国能源报2014-03-05 10:10:48

从samza到百度云，从hadoop的mapreduce到mongodb的nosql，我们的生活早已遍布大数据的应用。

类别：云计算来源：机房3602013-12-26 09:43:41

在传统的云相关技术架构上，可以将hive，pig和hadoop-mapreduce框架相关的技术内容全部划入到数据处理层的能力。...原来我思考的是将hive划入到数据分析层能力不合适，因为hive重点还是在真正处理下的复杂查询的拆分，查询结果的重新聚合，而mapreduce本身又实现真正的分布式处理能力。

类别：管理软件来源：光明网2013-12-23 13:11:38

通过hdfs、mapreduce、hbase、hive等多个维度的创新算法、规模化改进和优化, 云谷cloud canyon在产品功能和性能方面实现了突破。

类别：云计算来源：电脑之家2013-12-10 16:04:18

引言2005年jeffery发布mapreduce全新计算架构文章，2006年亚马逊推出ec2业务，随后google首次推出云计算概念，到 2009年，云计算被主流分析机构认为是战略it技术之首。

类别：电网信息化来源：比特网2013-11-27 14:04:15

symphony是同类中最佳的mapreduce执行方案，对计算密集型大数据应用优势明显;biginsight在hadoop框架上增加了ibm独特的技术优势，如安全管理和工作流等，并融入了ibm独特的数据分析

类别：发电信息化来源：WEB开发者2013-10-21 15:34:38

：一是用基于percolator的增量处理索引系统来取代mapreduce批处理索引系统，这个索引系统被称作caffeine，它比mapreduce批处理索引系统搜索更快。

类别：发电信息化来源：赛迪网2013-10-18 14:29:33

在此基础上，eayunos可以对接基于mapreduce、hive和mahout等大数据挖掘与分析工具，并提升与oracle、db2、mysql、teradata等关系式数据库、数据仓库和bi软件的互操作能力

类别：发电信息化来源：比特网2013-10-15 08:53:48

在软件方面，如hadoop和mapreduce等新兴的技术，可以帮助客户在基于行业标准的硬件环境当中建立大型分布式存储和计算机群，显著改变数据处理和分析的经济效益。

类别：发电信息化来源：西墙网2013-10-11 10:34:39

7、amazonamazon(亚马逊)向来以企业云平台闻名于世，但同时也推出过一系列大数据产品，其中包括基于hadoop的elastic mapreduce、dynamodb大数据数据库以及能够与amazon

类别：发电信息化来源：机房3602013-10-09 09:39:59

事实上，现在的大数据工具都是为it专家打造的，他们可以通过c++或者java实现mapreduce功能，但是却无法提供有价值的商业算法。...在这场数据的淘金中许多公司满载而归，然而大数据投资失败的公司也不可谓不多，所以就有了之前的一篇文章 why big data projects fail。

类别：发电信息化来源：机房3602013-09-30 09:14:27

oracle hadoop装载器使客户能够利 用hadoop mapreduce处理功能建立优化的数据集，从而在oracle数据库11g中进行高效率加载和分析。...oracle数据集成hadoop应用适配器通过oracle数据集成器易于使用的界面，自动生成hadoop mapreduce代码，简化了hadoop应用与oracle数据库的数据集成。

类别：电网信息化来源：机房3602013-09-29 14:28:20

hadoop源于google的mapreduce软件框架以及google使用的专有文件系统google文件系统。...由于hadoop基于google的mapreduce，因此设想它将运行在类似google的同质商用基础设施之上。此外，它还了解哪些cpu将用于服务器硬盘存储，chalmers解释道。

类别：电网信息化来源：中国传媒网2013-09-09 16:57:23

hadoop确实让数据处理和分析变得更廉价更高效，但由于最初hadoop并不是作为一个企业级工具出现，仅是一个建立在mapreduce基础上的软件库，而且开源，因此hadoop的安全措施并不如想象的可靠

类别：发电信息化来源：中关村在线2013-08-19 11:22:23

技术形成了批处理、流处理和交互分析三种计算模式：离线批处理(batch processing)技术以mapreduce和hadoop系统为代表，实时流处理(stream processing)技术以yahoo

类别：电网信息化来源：51CTO2013-08-12 13:27:54

在新型的编程模型方面，把mapreduce的工作面向于大数据、信息处理的工作也移到了天河二号上，这样的话，在强化科学工程计算的同时，可高效支持大数据处理、高吞吐率和高安全信息服务等多类应用，扩大了天河二号的应用领域