1回答
我已经在本地windows机器上的linux中安装了Hadoop/YARN。在同一台windows机器(不在VM中)上，我已经安装了Spark。在windows上运行spark时，我可以读取HDFS中存储的文件(在linux中)。val lines = sc.textFile("hdfs://MyIP:9000/Data/sample.txt")
当保存一个用于HDFS saveAsTextFile(
浏览 1提问于2018-09-16得票数 0
回答已采纳
它是非群集的，即只安装在一台服务器上。Mongoimport不工作，因为它在默认情况下将输入作为JSON文件。
浏览 5提问于2017-01-31得票数 0
1回答
我试图弄清楚如何挂载HDFS 2.7.1，但没有成功。像挂载本地文件系统一样挂载它的正确方法是什么？我已经有一个运行HDFS的集群。
浏览 6提问于2016-11-11得票数 0
3回答
我已经在Linux机器上安装了带有Hive的Spark1.5.2构建。Hive转移仓库目录的默认路径是:/user/hive/ path。
如果它是一个HDFS路径(很可能)，那么我们可以在不安装Hadoop的情况下访问它吗？
浏览 5提问于2016-01-12得票数 3
我需要使用hadoop在多节点集群上挂载HDFS。我怎样才能做到这一点？
我已经成功地在单节点集群上部署了fuse，但我怀疑它能否在多节点上工作。有人能把这件事弄清楚吗？
浏览 3提问于2014-03-18得票数 0
回答已采纳
2回答
文件夹中的流式文件
、、、
1)在传输日志文件之间是否需要kafka集群/代理，或者是否可以直接从windows机器传输到hadoop linux机器？2)是否可以在windows和hadoop linux机器上安装kafka，然后将CSV文件直接发布到hadoop机器上创建的kafka topic。
我将在hadoop机器上运行一个消费者？
浏览 4提问于2017-12-26得票数 0
HDFS是否支持带有文件打开事件的INotify？从文档中看，hdfs inotify似乎只支持append、close、create ...不包括文件打开，而linux inotify支持IN_OPEN
浏览 18提问于2018-01-18得票数 0
回答已采纳
我最近清空了一个驱动器(D驱动器)，并在其上安装了Ubuntu14.04，并安装了HADOOP和HIVE。现在，当我试图通过linux在HADOOP上工作时，我面临着空间限制。LINUX安装在D驱动器上，Windows安装在C驱动器中。当我想将本地文件系统中的数据移动到蜂箱中时，我必须先将其复制到HDFS中，然后再复制到蜂箱中，现在我的问题是，在这方面，我的计算机上的其他两个驱动器在这方面是否有任何用处，要么作为本地文件系统，要么作为HDFS，最重要的
浏览 0提问于2015-04-20得票数 1
回答已采纳
为什么在Hadoop中使用称为HDFS的特定文件系统？与NTFS或FAT相比，HDFS有什么优势？选择HDFS for hadoop的原因是什么？
浏览 6提问于2013-07-30得票数 0
3回答
我在这里阅读这篇文档：
Make the HDFS directories required to execute MapReduce jobs:
$ bin/hdfs dfs -mkdir /user/<username> 我是Hadoop的初学者
浏览 0提问于2014-06-06得票数 2
2回答
-P --表hduser
错误: 15/02/25 16:26:40错误文件:在运行导入作业时遇到IOException : java.io.FileNotFoundException:文件不存在: hdfs
浏览 1提问于2015-02-25得票数 0
回答已采纳
如何仅下载hdfs而不是hadoop？我正试图在linux/mac/windows上安装它。我尝试了搜索，但是所有的结果都指向hadoop安装程序，例如
谢谢。
浏览 2提问于2014-11-20得票数 0
回答已采纳
我从hadoop2集群安装了CDH5，有，用户hdfs、纱线和映射的CDH5(但不是kranach，他与hadoop无关)。现在，我在hdfs中的根目录具有如下权限因此，我假设，由于我kranach不属于超级组然而，当我这样做时：kranach@czarnobog:~$ hdfs dfs -mkdir /bla kranach@czarnobog:~$ h
浏览 1提问于2015-01-27得票数 0
回答已采纳
1回答
我们公司的云服务器只允许我们将文件保存到hdfs。是否有方法在hdfs上保存Keras模型。我试过model.save，但它不起作用。
浏览 0提问于2019-10-12得票数 1
我正在研究OpenClassroom，并试图理解Hadoop，但是我在安装它时遇到了一些问题(我在Linux上有点新)：
我已经安装和配置了Hadoop (我已经按照网站的要求更改了文件etc/hadoop/core-site.xml、etc/hadoop/hdfs-site.xml、etc/hadoop/mapred-site.xml和etc/hadoop/yarn-site.xml )。但在那之后，他们告诉我，为了发射Hadoop，我要这么
浏览 0提问于2019-02-05得票数 0
1回答
我在HDFS中有shell脚本。我只想在HDFS中收集此脚本的日志。#!/bin/bash
hdfs dfs -touchz /user/$USER/
浏览 4提问于2017-04-10得票数 1
回答已采纳
1回答
我在我的笔记本电脑上安装了一个独立的R和RStudio (Windown / Mac)和一个远程安装的Hadoop集群(Linux)。我想从RStudio连接到HDFS来读取数据，执行处理，最后，如果需要，将结果推送回HDFS。
我不太确定这是否可能，或者它只需要一个服务器版本的RStudio？有谁能建议一下最好的替代方案是什么？
浏览 4提问于2015-10-28得票数 2
我们有一个带有10台linux工作机器的HDP 2.6.4 spark集群。从我们得到的答案来看，在VM上
浏览 4提问于2019-04-15得票数 4
回答已采纳
1回答
如何在HDFS中创建块。例如，hadoop框架安装在例如redhat linux机器上。linux文件系统的默认块大小是4k。HDFS块是4k块上的逻辑包装器，或者是如何创建块的。我希望看到我刚刚复制到HDFS的所有特定文件块的位置(数据节点)。有什么命令可以在单一地点进行吗？
如果我将视频文件移动到HDFS，如何对此视频文件进行块分配？
浏览 1提问于2016-03-03得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
