腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
从Python检查
HDFS
中是否存在
文件
、
、
因此,我一直在使用Python中的fabric包来运行用于各种
HDFS
任务的shell脚本。如果该目录
不存在
,则此代码将生成 本地本地: hadoop :// -stat /
不存在
/
hdfs
/
浏览 3
提问于2016-11-22
得票数 4
回答已采纳
1
回答
在hadoop生态系统中将
文件
复制到
HDFS
时出错
、
、
在Hadoop3.0的终端上发出命令将
文件
从本地
文件
系统复制到
HDFS
时,会出现错误`
hdfs
://localhost:9000/user/Amit/hadoop-3.0.0/hadoop2_data/
hdfs
/datanode.但
浏览 0
提问于2018-02-18
得票数 1
回答已采纳
1
回答
无法读取Hadoop上的csv
文件
、
、
我试图读取csv
文件
,但我得到:No such file or directory.以下是命令:
浏览 3
提问于2022-06-08
得票数 1
2
回答
列出目录- unix shell脚本中的所有
文件
夹名
、
、
如何使用shell脚本获得所有
文件
夹的列表,目录在
HDFS
中。以下是我尝试过的:count=0do if [ -d
浏览 6
提问于2013-09-04
得票数 2
回答已采纳
1
回答
无法使用Hadoop命令创建目录?
、
我已经启动了
HDFS
和DataNode,但是当我尝试使用
HDFS
命令创建一个目录(在任何地方)时,它都不起作用。./
hdfs
dfs -mkdir -p /usr/master/datas./
hdfs
dfs -mkdir -p "/usr/master/datas"我刚刚开始学习大数据。谁能告诉我如何解决这个问题以及如何调试这个问题?
浏览 0
提问于2018-05-09
得票数 0
2
回答
hadoop jar命令中无法识别输入
文件
、
、
、
、
builtin-java classes where applicableat org.apache.hadoop.util.RunJar.main(RunJar.java:212) 这是我在运行hadoop jar命令时得到的错误,尽管输入
文件
存在于我在浏览器中检查的路径中
浏览 2
提问于2015-04-25
得票数 1
1
回答
在hadoop中运行jar
文件
时出错
、
、
、
在hadoop中运行jar
文件
时,我得到一个空指针异常。我不明白是什么问题。".txt"); //the
HDFS
)当我尝试使用java -jar myfile.jar args...运行jar
文件
时
浏览 3
提问于2014-09-25
得票数 1
回答已采纳
2
回答
从
hdfs
加载
文件
csv
、
我试图将CSV
文件
上载到分布式
文件
系统
hdfs
中,其中包括: But I get the following error:
浏览 1
提问于2018-10-31
得票数 2
回答已采纳
1
回答
无法在mapreduce中运行我的第一个wordcount示例
、
thread "main" org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist:
hdfs
浏览 2
提问于2017-06-08
得票数 0
回答已采纳
1
回答
Hadoop Java -将
文件
从windows共享
文件
夹服务器复制到
HDFS
、
、
java.io.FileNotFoundException/它说: java.io.FileNotFoundException: File //server_name/java.io.FileNotFoundException/
不存在
FileSystem.copyFromLocalFile (我认为这是从本地hadoop服务器到
hdfs
服务器) 与IOUtils.copyBytes
文件
相同的fileUtil >>
文件
不存在
不存在</
浏览 3
提问于2017-08-22
得票数 0
2
回答
Pyspark :如何根据日期获取特定的
文件
,以便从
文件
列表中加载到数据
文件
中
、
、
、
我试图从一组
文件
中加载一个特定的
文件
。 示例:我有这种格式的app_name_date.csv格式的
hdfs
文件
,在目录中有100个这样的
文件
。我想根据日期将csv
文件
加载到dataframe中。spark.read.csv("
hdfs
://XXXXX/app/app_name_+$currentdate+.csv") = dataframe1,但是它的抛出错误,因为$currentdate不接受,并且说<em
浏览 8
提问于2022-03-02
得票数 0
1
回答
如何让spark访问windows上的本地
HDFS
?
、
、
我可以在hadoop中访问
HDFS
文件
,例如,按照预期工作。然而,如果我试图从spark shell访问相同的
文件
,例如,我得到一个
文件
不存在
的错误。Spark可以使用file:/...访问windows
文
浏览 2
提问于2016-12-22
得票数 0
1
回答
hadoop运行示例输入路径
不存在
出什么事了,Input path does not exist:
hdfs
://master:9000/user/root/grep-temp-1940166004 但是我的输入路径是/user/hadoop/bin/
hdfs
dfs -ls /user/hadoop/input会显示Found 9 items,这没问题。
浏览 2
提问于2018-05-26
得票数 0
3
回答
如何使hadoop在
不存在
的情况下创建目录
、
、
、
、
对于此版本,如果我将一个
文件
放入
文件
系统,但目录结构
不存在
,它将自动创建父目录:/some/non/existing/path/myfile.txt hadoopfs -put myfile.txt放置:`/some/non-/现有/path/‘:没有这样的
浏览 1
提问于2014-05-07
得票数 25
1
回答
pydoop cp方法-如何指定关键字参数“错误”
、
、
我使用pydoop在
hdfs
位置之间复制
文件
。pydoop.
hdfs
.cp(src_
hdfs
_path,dest_
hdfs
_path,**kwargs)方法文档位于此页面上。所以我尝试了下面的代码
hdfs
.cp(srcpath, destpath, errors='ignore') 如果目标路径中
不存在
该
文件
,则代码可以工作否则,将给出一个<
浏览 6
提问于2021-03-11
得票数 0
回答已采纳
6
回答
火花Python提交错误:
文件
不存在
: pyspark.zip
、
、
我在跟踪错误, 诊断:
文件
不存在
:
hdfs
://xxxxxx:8020/user/
hdfs
/.sparkStaging/application_123456789_0138/pyspark.zipjava.io.FileNotFoundException: java.io.FileNotFoundException: File
不存在
:
hdfs
://xxxxxx:8020/user
浏览 3
提问于2016-01-06
得票数 2
1
回答
将目录从远程
HDFS
本地
文件
系统复制到本地计算机
、
、
我在本地
hdfs
环境中有一个目录,我想将它复制到我的本地计算机。我使用ssh (带有密码)访问
hdfs
。 我尝试过许多建议的复制命令,但都没有工作。
浏览 2
提问于2018-05-09
得票数 1
回答已采纳
3
回答
hdfs
中没有这样的
文件
或目录
、
当我这么做我找到一个名为: file_name.csv的
文件
$
hdfs
dfs -put /home/user_name/file_name.csv tempfolder(/home/user_name/是file_name.csv所在的位置,而
文件
夹是我在
hdfs
中创建的诱惑
文件
夹)。上面写着 "`/home/user_name/ file _name.csv'
浏览 0
提问于2018-05-16
得票数 0
回答已采纳
1
回答
security.UserGroupInformation: MR的PriviledgedActionException错误
、
、
ERROR security.UserGroupInformation: PriviledgedActionException as:user PriviledgedActionException输入路径
不存在
:file:/data1 1/PriviledgedActionException/filename.csv 我做了hadoop ls,用户是
文件
的所有者。
浏览 1
提问于2014-04-17
得票数 3
回答已采纳
1
回答
如何在hadoop中按年/日/时创建
文件
夹
、
我有问题,如何在hadoop中创建
文件
夹,但命名路径
文件
夹的年,日期,时间?示例:/user/
hdfs
/2015/10/10/0000 hadoop fs -mkdir /user/
hdfs
/2015/10/10/0000
文件
或目录
不存在
。如何使用hadoop fs -mkdir获取
浏览 3
提问于2015-10-22
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
HDFS常用文件操作命令
大数据 HDFS 小文件处理方案
大数据 HDFS集群搭建 文件配置详解
案例:HDFS分布式文件系统
FS Shell命令与JAVA实现操作HDFS文件
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券