什么是Map/Reduce？
Map/Reduce是一种编程模型，用于处理大规模数据集的并行计算。它主要包括两个阶段：Map阶段和Reduce阶段。在Map阶段，数据被拆分成多个子集，并在不同的计算节点上并行处理。在Reduce阶段，这些处理后的子集被合并和汇总，以生成最终的结果。Map/Reduce框架的典型应用场景包括数据挖掘、机器学习、大数据处理等。
在腾讯云中，可以使用云服务器ECS、存储CBS、负载均衡CLB等产品来搭建Map/Reduce框架。同时，腾讯云还提供了Hadoop、Spark等大数据处理框架，可以方便地在腾讯云上进行大数据处理和分析。
相关·内容
5回答
我听说过很多关于map/reduce的事情，特别是在Google的大规模并行计算系统的背景下。它到底是什么？
浏览 1提问于2008-12-23得票数 85
回答已采纳
5回答
我使用Hadoop开发Map/Reduce。我的驱动程序向Hadoop的作业跟踪器提交一个MapReduce作业(包含Map和Reduce任务)。我有两个问题: a)我的Map或reduce任务是否可以提交另一个MapReduce作业？(使用相同的群集Hadoop和到相同的Job Tracker)。这意味着，我的初学者驱动程序提交一个mapreduce作业，在这个作业中，它的map或reduce任务产生另一个MapReduce作业，并将其提交
浏览 1提问于2012-03-15得票数 2
在MongoDB上使用Hadoop /reduce和Mongo的内置map/reduce进行map/reduce工作的主要区别是什么？
我什么时候选择哪个map/reduce引擎？对于存储在mongodb中的数据，每个引擎的优缺点是什么？
浏览 0提问于2012-02-15得票数 22
回答已采纳
我没有在索引中使用Reduce部分。我在Map索引查询中使用Where子句而不是Where子句。这两种方法之间的区别是什么:使用Map-Reduce索引的Reduce部分还是在Map索引上使用Where子句？
我的猜测是，如果我错了，请纠正我。在使用Map-Reduce索引的情况下，作为索引的一部分存储的数据较少，因此查询效率更高。但是，如果需要对某些文档类型进行多个查询，则使用一个Map索引(具有
浏览 3提问于2011-12-24得票数 1
回答已采纳
3回答
我正在运行一个Map Reduce程序。然而，我得到了类似的输出，即使我只使用mapper运行它，或者同时使用mapper和reducer运行它。我不明白为什么在mapper完成100%之前reducer就开始了？可能的潜在问题是什么？输出：Map 19% Reduce 0%Map 39% Reduce 0
浏览 2提问于2015-06-17得票数 5
map 100% reduce 16%map 100% reduce 31%map 25% reduce 0%map 100% reduce 0%<e
浏览 1提问于2018-03-27得票数 2
谁能告诉我我应该找什么。这项工作变得卡壳了。INFO mapred.JobClient: Running job: job_201308291153_0015本地hadoop以伪分布式模式运行。
浏览 0提问于2013-08-30得票数 5
Hadoop Map Reduce和Google Map Reduce有什么区别？
仅仅是Hadoop为map reduce等提供了标准化吗？不同之处还包括什么？
浏览 2提问于2012-07-08得票数 18
从高层角度解释NoSQL非常容易--它基本上是“键值”存储。当然有上千个小的和重要的东西，但一般来说，它只是键值存储。
解释Hadoop和Map/Reduce的最佳方式是什么？可能是一些“真实世界”的例子，即使是新手也很容易比较？谢谢!
浏览 0提问于2010-11-15得票数 6
回答已采纳
Map Reduce是真正的分裂和征服吗？一些人简单地说是，另一些人说不是，这是一个流水线。你对以下内容有什么看法：Map Reduce涉及一个reduce过程，这在分治中不是必须的。我们可以说Map Reduce是涉及reduce阶段的分治的一个特例。其他没有什么需要减少的分而治之的问题(例如，二进制搜索)
浏览 1提问于2014-10-11得票数 0
1回答
在CouchDB中，您总是必须使用map reduce来查询结果。这些查询方法是不同于map-reduce的，还是仅仅是map-reduce函数的包装器？
浏览 2提问于2010-09-18得票数 1
回答已采纳
我是hadoop的新手。Allineamento“的自定义类型，因此：map当reduce阶段开始时，我有了这个
有人建议我在"Allineamento“中插入一个空的构造函数(public Allineamento(){})。是这条路吗？为什么？
浏览 0提问于2013-07-08得票数 0
回答已采纳
奇怪的是，我的工作是这样的：13/02/15 06:22:30 INFO mapred.JobClient: map 18% reduce 20%13/02/15 06:40:39 INFO mapred.Jo
浏览 0提问于2013-02-15得票数 2
我的问题是，我如何使用map重写下面的reduce解决方案？我在下面的解决方案中遇到了很多麻烦。 (reduce (
浏览 4提问于2012-04-13得票数 1
回答已采纳
2回答
我有点困惑；reduce任务和reduce任务有什么区别？这就是我的例子；我读到reduce只有在所有映射完成后才会开始...但在hadoop输出中，我看到了不同的情况：12/02/11 10:58:54 INFO mapred.JobClient: map 60% reduce 20%
12&
浏览 0提问于2012-04-17得票数 1
回答已采纳
1回答
我是Hadoop的新手。我记得我从某个地方了解到，在Hadoop中，所有的映射函数都必须完成，然后才能开始使用减约函数。但是，当我运行这样一个地图还原程序时，我得到了打印输出：map(20%), reduce(7%)map(38%), reduce(17%)它们为<
浏览 0提问于2013-09-13得票数 5
回答已采纳
1回答
: map 2% reduce 0%INFO mapreduce.Job: map 4% reduce 0%INFO mapreduce.Job: map 6% reduce 0%
INFO mapreduce.Job: map 7% <e
浏览 2提问于2017-04-13得票数 1
回答已采纳
1回答
我必须使用地图-Reduce来编写代码 我有csv文件 我正在尝试摆脱$的付款金额，以便我可以将其转换为浮点数 我还需要为它画一张图 所以 PayeeVendorName PayeAmount和Average付款 我尝试过以下代码，但不知道如何使用$符号并从字符串转换为浮点型，这样我就可以将其解析为map reduce # -*- coding: utf-8 -*-Spyder Editor
This
浏览 21提问于2019-05-11得票数 0
1回答
我想在我的应用程序上实现hive+hadoop的map reduce程序，我还在想，因为我已经尝试了很多次关于hive中map reduce程序的查询和查找信息。我的问题是，hive有自己的map reduce程序吗？reduce = 100%查询中有map reduce进程，然后如果我尝试google一些在hive中实现map red
浏览 3提问于2011-05-26得票数 1
回答已采纳
我刚接触Python，
有人知道Python (和函数式语言)函数、map() / reduce()和分布式计算相关的MapReduce概念之间的关系吗？
浏览 2提问于2011-11-14得票数 6
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
