腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
4
回答
可用于使用Hadoop/
MapReduce
框架的群集
、
、
有谁知道任何
免费
访问的集群,这些集群对公众开放,并且使用Hadoop/
MapReduce
框架?有很多关于如何使用
MapReduce
的教程,但是有没有一种方法可以在不使用本地单机并安装所需框架的情况下测试这些示例呢? 谢谢!
浏览 0
提问于2011-03-17
得票数 3
回答已采纳
2
回答
数据存储区
mapreduce
是否已弃用
、
、
、
我刚刚安装了
免费
试用版的Google Cloud platform。为了使用DataStore运行
MapReduce
任务,要求运行但我无法在本地获得这个文件,这是有充分理由的,这种运行
MapReduce
作业的方式似乎被弃用了在上看到这一点。这是真的吗?有没有其他方法可以在不需要BigQuery的情况下从本地命令行创建
MapReduce
任务?
浏览 3
提问于2015-06-08
得票数 1
1
回答
未处理的拒绝MongoError: CMD_NOT_ALLOWED:
mapreduce
、
我试图在一个
免费
的
mapReduce
计划中使用方法,但是我得到了这个错误at TLSSocket.emit (events.js:188:7)stream_readable.js:134:10)Unhandled rejection MongoError: CMD_NOT_ALLOWED:
mapreduce
浏览 7
提问于2017-08-13
得票数 0
回答已采纳
1
回答
Hadoop2.2.0流内存限制
、
、
、
、
所以我们在互联网上发现的是: 做得对,这就给了我们每个节点一个容器。
浏览 4
提问于2014-02-21
得票数 0
回答已采纳
2
回答
如何将google
mapreduce
参数传递给done_callback
、
在通过start_map启动
mapreduce
以便在done_callback中访问它时,我在设置参数时遇到了问题。最终,我要完成的是删除我为
mapreduce
作业创建的临时blob。", shard_count=7,from
mapr
浏览 0
提问于2011-11-14
得票数 2
回答已采纳
2
回答
容器的运行超出了物理内存。Hadoop Streaming python MR
、
、
、
、
/outfile 15/01/30 10:48:38 INFO
mapreduce
.Job: map 0% reduce 0%Container [pid=22533我正在使用Cloudera Manager (
免费
版) .These是我的配置: yar
浏览 0
提问于2015-01-31
得票数 2
1
回答
在亚马逊网络服务上使用弹性
MapReduce
的微型实例
、
由于有
免费
的微型实例,我想利用这些实例来运行我的
mapreduce
作业,似乎没有这样做的选项,因此在这方面的任何帮助都将是很好的。另外,如果这完全不可能,我想知道如何为
mapreduce
作业挑选任何运行中的实例(可能是EMR提供了通过控制台选择的小实例)?我基本上计划运行几个小实例,并让我所有的小
mapreduce
作业使用这些实例,这样我就可以赚到我支付的大部分钱。 提前感谢:)
浏览 0
提问于2013-10-15
得票数 0
1
回答
MapReduce
是一种架构模式吗?
对于文档研究:架构模式(如
MapReduce
),我从阅读
MapReduce
:简化数据处理的大型集群文件开始。作者将
MapReduce
定义为“用于处理和生成大型数据集的编程
模型
和相关实现”。我们可以认为
MapReduce
是一种架构模式吗?还是设计模式?为什么?。
浏览 0
提问于2014-11-21
得票数 0
回答已采纳
2
回答
Apache与Hadoop上的
Mapreduce
相比如何?
、
、
Apache与Hadoop上的
Mapreduce
相比如何?在哪些方面更好,为什么呢?
浏览 9
提问于2015-04-28
得票数 14
回答已采纳
2
回答
如何在Hadoop
mapreduce
中处理负载均衡?
、
、
、
、
如何在Hadoop
mapreduce
中处理负载均衡?我正在编写一个分布式应用程序,其中服务器根据基准测试、可用内存、CPU核心数、CPU使用率、可用GPU数/使用率将作业分发到工作节点。我对
mapreduce
不是很有经验,我已经在apache的网站上读过一些文档,但我仍然不确定如何着手解决这个问题。我是否可以进行基准计算并获得所有这些信息,然后通过算法动态拆分输入? 谢谢!
浏览 2
提问于2013-03-08
得票数 4
6
回答
MapReduce
/Hadoop入门
、
、
最近,我读了很多关于
MapReduce
/Hadoop的文章,我认为这是行业当前发展的方向。我想开始学习
MapReduce
/Hadoop,我认为最好的开始方式是实现一些小项目。
浏览 3
提问于2010-09-01
得票数 9
回答已采纳
1
回答
具有时间序列分词的MongoDB -
MapReduce
、
、
、
、
我有一个基于时间序列巴肯
模型
的模式。我现在正在尝试将一些聚合管道转换为
MapReduce
模型
,但我不知道在
MapReduce
中什么是“解压”。这是我的
模型
: 例如,如何根据"SITE_ID“对"val_per_day_dt”中的所有值求和?
浏览 1
提问于2020-03-01
得票数 0
2
回答
Mapreduce
和apache的hama之间的主要区别是什么?
、
、
、
、
嗨,我发现很难将
mapreduce
和hama进行比较,我知道hama使用这个批量同步并行
模型
,并且工作节点可以彼此通信,而在apache的hadoop中,工作节点只与namenode通信正确吗?如果是这样的话,我不明白hama会比hadoop中的标准
mapreduce
带来的好处,谢谢!
浏览 1
提问于2014-05-03
得票数 1
回答已采纳
1
回答
PIG和HIVE可以被称为单独的编程
模型
吗?
、
、
他坚持认为HIVE和PIG可以被称为独立的“编程
模型
”,因为当你用它们编写
MapReduce
作业时,你并不真的需要用
MapReduce
来思考--特别是当你在HIVE中编程的时候。从程序员的角度来看,
MapReduce
部分是完全抽象的。它完全类似于SQL。
浏览 3
提问于2011-02-12
得票数 1
3
回答
MapReduce
连续执行
、
、
、
我正在使用Hadoop将现有的时间序列数据库系统转换为
MapReduce
模型
。该数据库系统具有历史处理能力和实时处理能力.到目前为止,我能够将批处理功能转换为Hadoop。不幸的是,当涉及到实时处理时,我发现与
MapReduce
模型
存在一些概念上的不一致。
浏览 2
提问于2014-02-25
得票数 4
回答已采纳
1
回答
如何提高蜂窝的速度
、
、
我从twitter收集数据并将其存储在hdfs上。我想根据时间戳对这些tweet进行排序,但这个查询需要很长时间。可以做些什么来加速这个查询呢?
浏览 4
提问于2015-08-21
得票数 0
1
回答
Hadoop的白盒性能
模型
、
、
( )在本技术报告中使用白盒
模型
计算各种成本。但我对他们的工作有疑问-- 它们仍然适用于当前的Hadoop吗?
浏览 5
提问于2015-01-31
得票数 0
3
回答
如何将
mapreduce
库启动的数据存储写入最小化?
、
、
、
在本例中,
mapreduce
处理程序检查它得到的实体,如果它不是活动的,就什么也不做,不写。然而,在大约7个小时后,我的
免费
数据存储写入配额将从
mapreduce
调用中耗尽。根据我的粗略估计,它看起来就像只运行
mapreduce
导致了~ 120写/调用。(粗略计算,60次调用/小时*7小时= 420次调用,50k操作限制/ 420次调用~ 120次写入/调用) Q1:有人能验证只运行
mapreduce
触发器~120数据存储写入吗?为了绕开它,在启动
mapre
浏览 3
提问于2012-02-22
得票数 4
回答已采纳
4
回答
MapReduce
与纱线的区别
、
、
、
我在搜索hadoop和
mapreduce
关于straggler问题和这个问题的论文遗憾的是,没有论文讨论纱线中的散布问题。所以我想知道
MapReduce
和Yarn在部分掉队方面有什么不同?纱线有掉队的问题吗?
浏览 1
提问于2014-11-15
得票数 5
3
回答
针对of级数据的Map Reduce算法?
、
这个问题没有一个“正确”的答案。我想了解更多关于上述算法的运行时间。我对设置Map Reduce集群或运行标准算法不感兴趣。我想要严格的理论处理或运行时间。
浏览 1
提问于2010-02-10
得票数 4
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
MapReduce编程模型
Hadoop 分布式计算模型MapReduce(四):编程进阶
壹玖免费模式案例,免费模型之频率模型
MapReduce详解
MapReduce(一)
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券