北极星
      北极星为您找到“MapReduce”相关结果34

      来源:电子发烧友2018-05-22

      所以现在国内现在新兴的电网海量实时数据系统,其核心数据库大都采用了hadoop的hdfs系统,通过使用分布式数据存储和mapreduce运算模型,来实时存储如此巨大的数据。这和淘宝网的数据库是相似的。

      来源:前瞻产业研究院2017-11-27

      中间层是类似hadoop、mapreduce的数据分析软件,原有的软件产业也要转型,由卖软件转为以数据为中心。再往上就是百度、腾讯、阿里巴巴等大数据应用服务公司,需要增加数据分析的效用。

      来源:国能日新2017-07-31

      基于hbase作为mapreduce后台数据源,以支撑离线分析应用,运用redis实时加载主键索引及设备数据。

      来源:电力信息与通信技术2017-03-10

      mapreduce模型如图1所示。图1 mapreduce模型fig.1 mapreduce model整体来说,大数据挖掘技术在新一代智能变电站变电设备状态监测与评估中的应用还处于起步阶段。

      来源:i黑马2016-10-11

      一拨要从零开始打造自己的大数据底层技术,把 mapreduce、gfs、bigtable 这些组件都要实现一遍,结果花了两三年时间,也没能稳定运行。

      来源:北极星输配电网整理2015-09-07

      大数据分析常和云计算联系到一起,因为实时的大型数据集分析需要像mapreduce一样的框架来向数十、数百或甚至数千的电脑分配工作。下文是中国报告大厅小编整理的大数据行业的定义及用途分析。

      来源:中国报告大厅2015-07-23

      大数据分析常和云计算联系到一起,因为实时的大型数据集分析需要像mapreduce一样的框架来向数十、数百或甚至数千的电脑分配工作。下文是中国报告大厅小编整理的大数据行业的定义及用途分析。

      来源:36Kr2015-06-12

      然后,过了几年,google会时不时公布1、2篇相关技术的论文,开源界就会开始山寨google的技术,很多技术都是这样,如mapreduce催生了hadoop,bigtable公布出来后,一大堆nosql

      来源:cnblogs2015-05-27

      google整个的软件构架都是基于各种各样的分布式系统,诸如borg、 mapreduce、bigtable等。正是这些分布式系统,使得google可以处理高并发请求响应以及海量数据处理等。

      来源:电工学习网2015-05-19

      (1)编程模型mapreduce是google开发的java、python、c++编程模型,它是一种简化的分布式编程模型和高效的任务调度模型,用于大规模数据集(大于1tb)的并行运算。...mapreduce模式的思想是将要执行的问题分解成map(映射)和reduce(化简)的方式,先通过map程序将数据切割成不相关的区块,分配(调度)给大量计算机处理,达到分布式运算的效果,再通过reduce

      来源:码农网2015-01-15

      mapreduce是当前云计算主流并行编程模式之一。mapreduce模式将任务自动分成多个子任务,通过map和reduce两步实现任务在大规模计算节点中的高度与分配。...mapreduce是google开发的java、python、c++编程模型,主要用于大规模数据集(大于1tb)的并行运算。

      来源:比特网2014-08-26

      在分析层面,除了传统的sql和mapreduce之外,还引入了最新的图形分析引擎,能够处理大规模分析图表查询以及预建图形功能,并可以应用到客户流失、产品关联性、欺诈侦测以及推荐引擎等分析场景。...据了解,teradataaster大数据探索平台可以汇集不同的数据源、结构化的数据、非结构化的数据,并且有着很多不同的分析方法,如sql、mapreduce,关联分析、路径分析、文本分析等,通过将这些分析方法进行结合

      来源:大云网2014-07-29

      它包括common、distributedfile system、mapreduce三个组件部分。

      来源:OFweek物联网2014-03-24

      该技术和mapreduce一样,具有强大的批处理能力,而且impala对于实时的sql查询也有很好的效果,通过高效的sql查询,你可以很快的了解到大数据平台上的数据。...该技术采用内存计算,从多迭代批量处理出发,允许将数据载入内存做反复查询,此外还融合数据仓库、流处理和图计算等多种计算范式,spark用scala语言实现,构建在hdfs上,能与hadoop很好的结合,而且运行速度比mapreduce

      来源:中国储能网新闻中心2014-03-05

      从samza到百度云,从hadoop的mapreduce到mongodb的nosql,我们的生活早已遍布大数据的应用。

      来源:中国能源报2014-03-05

      从samza到百度云,从hadoop的mapreduce到mongodb的nosql,我们的生活早已遍布大数据的应用。

      来源:机房3602013-12-26

      原来我思考的是将hive划入到数据分析层能力不合适,因为hive重点还是在真正处理下的复杂查询的拆分,查询结果的重新聚合,而mapreduce本身又实现真正的分布式处理能力。...mapreduce只是实现了一个分布式计算的框架和逻辑,而真正的分析需求的拆分,分析结果的汇总和合并还是需要hive层的能力整合。最终的目的很简单,即支持分布式架构下的时效性要求。

      来源:光明网2013-12-23

      通过hdfs、mapreduce、hbase、hive等多个维度的创新算法、规模化改进和优化, 云谷cloud canyon在产品功能和性能方面实现了突破。

      来源:电脑之家2013-12-10

      引言2005年jeffery发布mapreduce全新计算架构文章,2006年亚马逊推出ec2业务,随后google首次推出云计算概念,到 2009年,云计算被主流分析机构认为是战略it技术之首。

      来源:比特网2013-11-27

      symphony是同类中最佳的mapreduce执行方案,对计算密集型大数据应用优势明显;biginsight在hadoop框架上增加了ibm独特的技术优势,如安全管理和工作流等,并融入了ibm独特的数据分析

      相关搜索