2回答
MyFirstMapReduce/Files/input/': No such file or directoryCentOSKernel Linuxexport HADOOP_MAPRED_HOME=$HADOOP_INSTALL export HADOOP_HDFS_HOME/WordCount.java
WordCount.cla
浏览 4提问于2015-04-10得票数 0
回答已采纳
我搞不懂hdfs的/user空间是在哪里分配的。它在Linux文件系统中不可见。但是在hdfs中有一个名为/user的目录。我猜是因为配置的原因？它是否跨集群中的所有节点创建？
浏览 6提问于2015-02-21得票数 0
我正试图找到一种解决方案，将文件从本地windows机器或本地linux机器复制到云上的hdfs。我知道一个解决办法
节点-> hdfs (使用hdfs命令)
hdfs文件：：//<‘本地-主机’>：<‘本地-路径’>hdfs://
浏览 2提问于2016-06-17得票数 0
/data/2/dev/sdd1 1.8T 745G 996G 43% /data/4
HDFS
浏览 9提问于2013-07-25得票数 2
回答已采纳
2回答
我使用以下命令在hdfs中创建了一个文件通过使用以下命令，我可以看到创建的文件但是，我无法通过使用linux命令(使用查找或定位)找到位置本身。它说，hdfs是虚拟存储。在这种情况下，它是如何使用哪个分区或需要使用多少分区，在哪里存储元数据？
我在hdfs-site.xml中提到的虚拟存储是否
浏览 1提问于2016-08-19得票数 1
回答已采纳
获取一个简单的.txt文件并将其传输到cloudera中的hdfs目录中。
但没那么走运。任何帮助或指导都将不胜感激。
浏览 40提问于2017-02-16得票数 0
回答已采纳
我想通过python模块" hdfs“远程上传文件到我的hdfs。我的hadoop在我的linux上运行，但我想远程上传文件在我的windows(或其他计算机)。当我使用如下代码时：client = InsecureClient('http://xx.xx.xx.xx:50070', user='user')
我可以使用client.walk('/')来<em
浏览 1提问于2017-03-22得票数 2
我是hadoop的新手，我已经将Hadoop2.7.2安装在两台机器上，这两台机器是Masterandslave1。我跟踪了。本教程中没有提到这一点，但我也在hadoop-env.sh中编辑了JAVA_HOME和HADOOP_CONF_DIR变量。最后，我安装了两台机器hadoop。在主NameNode中，DataNode、SecondaryNameNode、ResourceManager和NodeManager在运行，而在slave1中，DataNode和NodeManager在运行。
我可以在浏览器中转到master:8088，当我转到时，这里只有主节点。我不能去isci17:8088，那
浏览 1提问于2016-11-23得票数 0
回答已采纳
我面临的问题是，HDFS上有一个带有路径/tmp/data的目录，它有一些csv文件，比如abc.csv，现在这个文件夹也存在于节点的一个本地linux上，并且包含一个csv文件xyz.csv。当我从node1运行以下命令时：hdfs dfs -ls /tmp/data/*.csv，我期望输出显示abc.csv，但是，我收到一个错误消息：在本地
浏览 4提问于2017-02-02得票数 1
回答已采纳
我正试图在我的一个datanodes上创建一个组，它将具有hdfs和相关fs命令的超级用户权限。到目前为止，我已经：使用: groupadd超级组在datanode上创建一个本地组当我运行"hadoop -report“时，我仍然会收到错误，我不是超级用户，我应该能够访问hdfs中的任何东西，而不管作为超级用户的权限如何，但我不能。
浏览 0提问于2014-05-02得票数 2
回答已采纳
unknown-linux-gnu/lib/rustlib/x86_64-unknown-linux-gnu/lib/libterm-1d56ea45a67842c8.rlib" "/usr/local/rustup/toolchains/1.54.0-x86_64-unknown-linux-gnu/lib/rustlib/x86_64-unknown-linux-gnu&
浏览 85提问于2021-09-01得票数 0
回答已采纳
但是我不知道如何提取并加载到HDFS中，这样我就可以在Pig中运行一些数据分析。我是否将它们提取为CSV并加载到Hbase或Hive？如果有人能帮我找到合适的资源会很有帮助。
浏览 0提问于2015-10-10得票数 0
注意:我已经阅读了之前关于堆栈溢出的所有与此场景相关的文章，但没有发现任何有用的信息。1)当我检查pwd时，连接到hadoop之后，它显示/home/hduser。这意味着我在hduser dir中，它也是我的hadoop环境的用户。当我使用下面的命令创建dir时，dir将被创建。我的问题是，为什么不能从终端而在上看到路径/home/hduser下的dir (用户)？
2)在我的根下有两个存在，一个是Jon，另一个是hduser。在位置/home/Jon的位置/home/ Jon，我在用户Jo
浏览 6提问于2017-06-04得票数 1
回答已采纳
1回答
我已经在本地windows机器上的linux中安装了Hadoop/YARN。在同一台windows机器(不在VM中)上，我已经安装了Spark。在windows上运行spark时，我可以读取HDFS中存储的文件(在linux中)。val lines = sc.textFile("hdfs://MyIP:9000/Data/sample.txt")
当保存一个用于HDFS saveAsTextFile("hdfs</em
浏览 1提问于2018-09-16得票数 0
回答已采纳
我在Linux中有一个输入文件，它有一个头文件。我无法修改此文件，因为只有只读访问该文件。在将文件从Linux复制到HDFS时，还有其他方法可以跳过/忽略标头吗？比如copyFromLocal -1 input_file_name hdfs_file_name？
浏览 2提问于2017-09-18得票数 0
回答已采纳
我需要将一个文件夹从本地文件系统复制到HDFS。我找不到任何将文件夹(包括其所有子文件夹)移动到HDFS的示例
$ hadoop fs -copyFromLocal /home/ubuntu/Source-Folder-To-Copy HDFS-URI
浏览 0提问于2015-01-29得票数 76
1回答
如何在HDFS中创建块。例如，hadoop框架安装在例如redhat linux机器上。linux文件系统的默认块大小是4k。HDFS块是4k块上的逻辑包装器，或者是如何创建块的。我希望看到我刚刚复制到HDFS的所有特定文件块的位置(数据节点)。有什么命令可以在单一地点进行吗？
如果我将视频文件移动到HDFS，如何对此视频文件进行块分配？
浏览 1提问于2016-03-03得票数 1
回答已采纳
我需要安装一个“可安装的HDFS”。在四处寻找时，我得到了几个教程：
他们都是从sudo apt-get install hadoop-0.20-fuse开始的。我对Linux还不熟悉。我怎样才能让我的Ubuntu找到这个包裹？(Ubuntu12.10新安装的LTS。从那以后，我做的唯一一件事就是安装和配置Hadoop和HBase。自述文件中的说明似乎表明，在安装HDFS之前，我们需要安装FUSE。我也被困在这个..。
请帮帮忙。
浏览 1提问于2012-10-29得票数 3
如何使用Flume将一组csv文件从本地目录复制到HDFS？我尝试使用假脱机目录作为我的源，但未能复制。= MemoryChannel-2 agent1.sinks.HDFS.hdfs.path = hdfs://localhost:8020/user/cloudera/runs
agent1.sinks.HDFS</
浏览 0提问于2014-07-20得票数 1
回答已采纳
云服务器
对象存储
ICP备案
云点播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号