我需要从FTP服务器下载文件到amazon EMR,我有一个shell脚本来下载文件,但它在linux计算机上工作,而不是在amazon EMR namenode中。我没有收到任何错误,终端在运行shell脚本后没有显示任何内容。
注意:我已经在主安全组上启用了端口。我知道将FTP下载到s3然后再下载amazon EMR的另一种方法,但我需要直接将文件下载到Amazon EMR。
发布于 2014-06-25 15:06:28
我假设您已经尝试使用引导脚本将文件从FTP服务器下载到amazon EMR。
调试出了什么地方出了问题。当主节点/从节点启动并看到脚本运行良好时,你能连接到它们吗?如果脚本没有运行,这会有所帮助。
另一种调试方法是,一旦节点启动,尝试在EMR节点上手动运行脚本,并查看它们是否抛出一些错误。
希望这将有助于调试脚本不运行的原因。
https://stackoverflow.com/questions/24360419
复制相似问题