WebHDFS 展示了如何使用BigInsights WebHDFS列出hdfs中的文件和文件夹、创建目录和上传文件。
如何调整示例以下载适用于BigInsights WebHDFS的文件？
浏览 15提问于2016-07-22得票数 0
回答已采纳
我正在尝试从WebHDFS接口连接到配置单元数据库，该数据库需要凭据才能连接。我在一家大公司，我必须使用另一个网关，所以我想在标题中转发大数据平台的凭据，但我总是有一个401未授权。我尝试了很多参数名称，但都不起作用 我希望找到Knox能够理解的参数/变量的正确名称。
浏览 20提问于2019-08-26得票数 0
我想下载HDFS目录中的特定文件，它们的名称以"total_conn_data_“开头。因为我有很多文件，所以我想写一个bash脚本。下面是我要做的： myPatternFile="total_conn_data_*.csv" curl -i
浏览 20提问于2020-01-31得票数 0
我一直在尝试让Apache Knox在一个kerberised的Cloudera集群上工作。我下载了包含Knox的zip并安装了它。我还在sandbox.xml文件上进行了特定于我的集群的更改。
浏览 4提问于2018-06-22得票数 1
为了通过指定访问文件系统的URI，我使用了一个配置参数spring.hadoop.fsUri。HDFS本身受到Apache Knox的保护(对我来说，它只是一个处理身份验证的代理)。因此，如果我使用curl调用代理URI，就会使用与没有Apache Knox时完全相同的语义。示例：
curl -k -u guest:guest-password https://sandbox.hortonworks.com:8443/gateway/kno
浏览 0提问于2015-11-19得票数 0
我已经为我们的Hadoop集群设置了KNOX网关，并且我已经学习了KNOX WebHDFS示例。到目前为止，我知道下面的cURL命令可以用来创建一个目录并上传一个单个文件。curl -k -u username:password -X PUT https://localhost:8443/gateway/default/webhdfs/v1/user/testuser?op=MKDIRS
curl -i -k -u usern
浏览 6提问于2018-07-03得票数 0
2回答
我希望创建一个健康检查机制，以确保删除负载均衡器后面配置的不健康的Knox实例。我想知道是否有任何方法来确定相同的？或者，Knox本身是否提供了一种机制，我可以对网关服务器进行http (非安全的，因为不允许对实例的直接https调用)调用并确定？
谢谢！！
浏览 2提问于2016-10-05得票数 0
回答已采纳
1回答
我使用演示LDAP在那里设置Apache，目前正在尝试通过SQuirreL设置到Knox的连接字符串。我不能使用Hortonworks沙箱，因为我需要使它与Cloudera下的Hive兼容。在开始配置Knox之前，我希望能够首先使用Hive驱动程序连接到它。hive.server2.transport.mode=http;httpPath=gateway/default/hive
我应该使用什么路径作为我的sslTrustStore？它目前位于&
浏览 4提问于2018-07-03得票数 0
我有一个构建脚本，它复制了存储库和依赖项： repositories { dependencies { classpath'org.apache.knox:gateway-shell:0.6
浏览 2提问于2015-12-21得票数 2
由于Kerberos的安全性，我无法从浏览器访问WebHDFS。有人能帮我吗？HTTP错误401
访问/webhdfs/v1/prod/快照_rpx/存档时出现问题。
浏览 2提问于2015-11-23得票数 3
我尝试列出hadoop集群中存在的数据，并使用curl命令复制数据，但我收到http 405错误。下面是我正在使用的命令。guest-password -L -T samples/hadoop-examples.jar \/gateway/sandbox/webhdfs/v1/user/guest/knox-sample/
浏览 4提问于2014-04-14得票数 0
2回答
我已经尝试给出路径为“hdfs://localhost:9000/path to file”，但仍然不起作用，还有其他方法可以读取文件吗？我想给出程序中的文件路径，但不是作为终端上的参数...
浏览 4提问于2014-03-21得票数 0
我正在使用访问我的Amazon存储桶以进行文件存储。我存储各种各样的文件-主要是MS，Office和pdfs，但可以是二进制文件或任何其他类型。我还使用 4.13.3和与进行流支持；在上传文件时，我使用busboy，然后通过knox直接将其处理到S3，这样就不必先将它们写入本地磁盘。这些文件上传得很好(我可以使用手动浏览和下载它们)，但是我在下载时遇到了问题。
为了清晰起见，我不想
浏览 12提问于2015-11-04得票数 1
回答已采纳
如何使用knox通过node.js上传文件？
上传到node.js的完整代码是什么，从路由到使用诺克斯上传？我认为那里的文档只涵盖了他们将其放到s3上的部分。
浏览 2提问于2011-02-15得票数 1
回答已采纳
我正在试验node.js的诺克斯模块，将其作为管理亚马逊S3存储桶中一些小文件的一种方式。每件事都可以独立工作:我可以上传文件，下载文件，等等。但是，我希望能够按循环时间表下载文件。当我将代码修改为按一定时间间隔运行时，我会将下载的文件附加到前一个实例，而不是覆盖。knox = require(&
浏览 0提问于2012-02-05得票数 0
有没有什么方法可以使用WebHDFS REST API从HDFS下载文件?我所能达到的最接近的方法是使用打开操作读取文件并保存内容。curl -i -L "http://localhost:50075/webhdfs/v1/demofile.txt?op=OPEN" -o ~/demofile.txt
有没有什么API可以让我不用打开就可以直接下载这个文件
浏览 1提问于2013-06-01得票数 13
回答已采纳
2回答
我试图在我的请求中向客户端发送一个文件的内容，但documentation Express唯一的下载功能是它需要一个物理文件；我试图发送的文件来自S3，所以我所拥有的只有文件名和内容。如何发送文件的内容、内容类型和文件名的适当标头以及文件的内容？
浏览 1提问于2013-02-15得票数 3
回答已采纳
1回答
generate (default-cli) @ standalone-pom ---http://repo.maven.apache.org/maven2/org/codehaus/groovy/groovy/1.8.3/groovy-1.8.3.jar
[INFO] ---------------------------------------------------------------maven-archetyp
浏览 1提问于2017-11-14得票数 0
回答已采纳
1回答
我使用命令ddf.read_parquet("http://IP:port/webhdfs/v1/user/...")然而，ddf.read_parquet可以使用"webhdfs://“
我希望ddf.read_parquet工作为http，因为我想使用它在dask集群的工人没有hdfs访问。
浏览 1提问于2020-05-31得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
