我正在学习Hadoop (2.7.1)。我正在Ubuntu (15.04)上配置它，并为Hadoop创建了一个单独的用户，以将Hadoop文件系统与Linux文件系统隔离开来。但是，当我试图在这个hadoop用户下使用sudo时，我会得到一个错误：
这个用户应该在sudoers文件中吗？在哪种情况下，我应该在hadoop和root用户下工作？
浏览 6提问于2016-07-18得票数 0
回答已采纳
2回答
我有一个关于hadoop安装的问题。目前我在VirtualBox上使用镜像，但我想在openstack上创建一个集群。起初，我认为我只需要在openstack上实例化一个hadoop镜像，或者安装几个实例并使用hadoop docker镜像。但是我找到了几个Sahara openstack的例子。知道我已经与多个人共享了openstack，是否可以在不经过openstack Sahara的情况下创建hadoop集群？或者不推荐这样做？
浏览 41提问于2019-03-11得票数 1
我有三台笔记本电脑(使用ubuntu)，我正在将它们连在一起，作为hadoop的集群。我也有一台仅windows的机器，是否可以将其添加到集群中并使其充当节点？这可行吗？有没有人遇到过这样的问题？
浏览 0提问于2012-06-19得票数 3
回答已采纳
我需要为spark作业创建一个AWS EMR集群，其中有一个主节点和4个具有自动扩展功能的核心节点。我需要有不同的实例类型的主和核心与Ubuntu 16.0安装在它上。
浏览 0提问于2018-10-04得票数 0
现在我的spark+hadoop已经安装在linux服务器上了。如何将我的spark代码从eclipse启动到spark集群(在linux上)？
任何建议。
浏览 4提问于2015-11-08得票数 2
1回答
我在我的笔记本电脑中启动了HDFS，并看到我可以在HDFS中查询csv和json文件。现在我想查询另一台笔记本中的文件。因此，我在另一台笔记本上启动了hdfs，当我给出select *查询时，它失败了(尽管我可以执行show files查询而没有问题)。我所得到的错误在dropbox链接中：
Apache演练版本: 1.1.01)是否有可能在hadoop集群外的机器上运行钻取程序并查询集群中的hdfs
浏览 3提问于2015-08-20得票数 0
我是 Hadoop 的初学者，我在Google平台上创建了一个Hadoop集群(一个主服务器和两个奴隶)。我使用本地文件系统(Linux)：ssh -i key key@public_ip_of_master访问集群的主服务器
然后，我在集群中做了sudo su -，因为函数在根用户时只出现。然后，我使用start-dfs.sh和start-all.sh启动了HDFS。现在的问题是，想要将文件从本地Linux文件系统传输到 Hadoop</em
浏览 3提问于2022-02-16得票数 -1
我既不是linux的专家，也不是hadoop的专家，但我遵循了在分布式模式下安装hadoop的说明(Hortonworks发行版和手册)，当我读到启动集群一节时，我思考了为什么这不能作为服务运行。有没有人有将hadoop作为linux服务运行的经验？这是个好主意还是坏主意？赞成与反对?有什么提示要这么做吗？
任何帮助都会得到重视。Thx
浏览 1提问于2013-09-02得票数 0
2回答
我有一个用Hadoop安装的EC2映像。但是，我将它设置为在实例化时是没有滚动的(它不是奴隶或主)。为了启动Hadoop集群，我在EC2上启动了我需要的尽可能多的实例(节点)，然后我必须对每个节点执行以下3项操作：
启用节点之间的SSH访问。其他人<
浏览 6提问于2012-10-15得票数 2
回答已采纳
得到了一个旧的hadoop系统(多年没有使用过)，当试图重新启动集群时(一个主服务器，两个从服务器)，全部在Linux上，在namenode上出错。at org.apache.hadoop.hdfs.server.namenode.NameNode.initialize(NameNode.java:437)
浏览 0提问于2021-03-18得票数 1
1回答
我在我的家庭网络中的3台计算机上安装了Hadoop2.7.1，其中1台是64位mac，2台是32位linux。我已经成功地将它们配置为在单节点模式下运行，并设置了SSH授权密钥。我想用我的mac作为主机，linux作为从机。当我在mac上运行启动脚本时，我得到这样的错误
hadoop@10.0.1.100: bash: line 0: cd: /usr/local/Cellar/hadoop/2.7.1/libexec:No s
浏览 1提问于2016-01-11得票数 0
1回答
我们正在试用dask_yarn版本0.3.0 (使用dask 0.18.2)，因为我使用的版本为0.10.0。
这样做的正确语法/配置是什么？
浏览 4提问于2018-09-06得票数 0
我对hadoop有基本的理解。我的问题是客户机/开发人员如何连接到hadoop集群来执行查询。
例如，我是hadoop开发人员。某个远程位置的Hadoop集群。如何连接到hadoop集群来运行我的java代码？我是否也必须在我的笔记本电脑中安装hadoop (为此我必须运行Linux)？或者，如果我与Hadoop集群在同一个网络中，只需
浏览 4提问于2014-11-07得票数 1
回答已采纳
1回答
为什么我们使用CDH (cloudera)而不是使用Apache或。就一个人？它的优点是什么？谢谢
浏览 3提问于2015-01-26得票数 1
回答已采纳
但是，如果我在所有数据节点上运行"yarn classpath“命令，我会看到以下输出：
/etc/hadoop/conf:/usr/lib/hadoop/lib/*:/usr/lib/hadoop///*:/usr/lib/hadoop-hdfs/./:/usr/lib/hadoop</
浏览 3提问于2014-05-05得票数 2
回答已采纳
我已经在linux上安装了带有单节点集群配置的Hadoop1.2.1。它运行良好，jps命令显示了所有5个作业的信息。现在，当我使用命令bin/start-all.sh启动hadoop时，hadoop启动了所有5个作业，但几秒钟内namenode就关闭了自己。 ERROR org.apache.hadoop.hdfs.server.namenode.NameN
浏览 2提问于2015-01-12得票数 1
我有一个用于HDFS的多节点独立hadoop集群。我可以将数据加载到HDFS，但是每次我重新启动计算机并通过start-dfs.sh启动集群时，直到我执行擦除所有数据的hdfs namenode -format时，我才能看到仪表板。如何启动hadoop集群而无需通过hdfs namenode -format
浏览 2提问于2020-08-22得票数 0
我使用WSO2 BAM 2.4.1运行Hive脚本，默认情况下，它只启动1 MapReduce作业，如下所示。需要有关如何配置WSO2 BAM以运行多个作业的帮助。
谢谢!
浏览 5提问于2014-08-29得票数 0
1回答
我正在尝试在Amazon Cloud上设置运行一些hadoop MapReduce作业，但我正在努力成功地创建一个集群。我已经下载了ec2文件，有我的证书和密钥对文件，但我相信是AMI给我带来了麻烦。如果我试图运行一个包含一个主节点和n个从节点的集群，我会使用标准兼容的AMI启动n+1实例，然后在终端中运行代码"hadoop-ec2 start cluster name n“。主节点是成功的，但是当从节点开始启动时，我收到一个错误，显示"missing paramet
浏览 2提问于2011-11-08得票数 0
回答已采纳
云服务器
ICP备案
对象存储
即时通信 IM
云直播
腾讯云开发者
