我想在位于不同服务器上的两个hadoop集群之间传输数据。来源: hadoop版本Hadoop 2.0.0-cdh4.3.1我在源代码中有一个目录：我在destination中有一个目录：我希望将</em
浏览 0提问于2014-09-03得票数 0
我有两个集群A和B。集群A有5张表。现在我需要在这5个表上运行一个配置单元查询，查询的结果应该更新集群B表数据(覆盖结果查询的所有列) 注意:在此过程中，我们不应该在集群A上创建任何文件，但允许使用临时文件。 这可行吗？两个群集之间需要什么权限/配置才能实现这一点？ 我如何才能获得此任务/任何其他有效的替代方案？ 在完成这项任务之后，我应该使用
浏览 11提问于2019-09-06得票数 0
我是否可以创建位于另一个hadoop群集的配置单元数据库/外部表？hadoop_cluster1 ->运行配置单元服务hadoop_cluster2 ->存储数据或
create external
浏览 14提问于2020-06-05得票数 0
1回答
MapReduce工作流基准测试
、、、、
任何机构都可以通过任何基准来测试MapReduce工作流吗？或者一般情况下，BigData工作流基准测试一些工作流系统的性能和准确性，如Oozie？
浏览 3提问于2014-04-09得票数 0
尝试将文件从一个hdfs文件夹移动到非安全群集中的另一个hdfs文件夹中。源和目的地都位于非安全群集上。下面的代码在安全群集中执行，以将文件从源hdfs文件夹移动到非安全群集中的目标hdfs文件夹。import org.apache.hadoop.fs.{FileSystem, FileUtil, Path}i
浏览 2提问于2019-12-24得票数 0
回答已采纳
1回答
我们有两个集群。一种是包含Nifi的hdf集群，另一种是包含HDF、Hive等组件的HDP集群。我们正在从文件中读取数据，并希望将其放入hdp群集hdfs中。
浏览 1提问于2016-10-28得票数 0
我是Hadoop / Hive的新手，我刚刚开始阅读文档。有很多关于在集群模式下安装Hadoop的博客。另外，我知道Hive运行在Hadoop之上。我的问题是: Hadoop安装在所有集群节点上。我是应该在所有群集节点上也安装配置单元，还是只在主节点上安装？
浏览 2提问于2011-12-10得票数 17
回答已采纳
我正在从事一个Hadoop项目，并在我的本地集群中生成大量数据。不久之后，我将使用基于云的Hadoop解决方案，因为与实际工作负载相比，我的Hadoop集群非常小，但是到目前为止，我还没有选择我将使用哪一个，即基于Windows Azure、EMR或其他什么。我在本地生成了大量数据，并希望将这些数据存储到一些基于云的存储中，因为我稍后将在Hadoop中使用这些数据，但很快就会使用这些数据。
我正在寻找建议，以决定根据某人的经验选择哪个云商店。提前谢谢。
浏览 0提问于2012-05-08得票数 2
回答已采纳
我们有一个带有hadoop-1.0.1的hbase-0.94集群。我们不希望在使用hadoop-2.5.1升级到hbase-0.98时此群集出现宕机
我使用hadoop-2.5.1配置了另一个hbase-0.98集群，并希望将hbase-0.94表复制到hbase-0.98
浏览 2提问于2016-07-27得票数 2
我们有基于ambari的Hadoop集群，因为thrift服务器的性能很差，我们决定用presto替换它。我们当前的Hadoop集群有以下机器960台数据节点机器(基于redhat 7操作系统) presto- Presto (或称PrestoDB)是一个开源的分布式SQL查询引擎，专为对任意大小的数据进行快速分析查询而设计，12台机器用于presto工作进程 安装操作系统后，我们成功地安装了presto ( presto协调器+ presto工作进程) 现在我们被困在如何从presto集群集</
浏览 35提问于2019-04-18得票数 1
在一个有5个节点的测试集群上，我的HDFS中存储了大量的hive表。数据应在70 Gb *3左右(复制)。不，我想将整个设置转移到具有更多节点的不同环境中。无法在两个群集之间建立网络连接。因此，我需要一个可靠的计划。:)如何在新群集上以最小的配置工作量传输配置单元设置？是否可以仅将5个节点的hdfs目录复制到新群集的5个节点，然后将其余节点添加到
浏览 3提问于2013-01-11得票数 1
回答已采纳
假设有一个拥有20台机器的Hadoop集群。在这20台机器中，有18台机器是从机，19台机器用于NameNode，20台机器用于JobTracker。现在我知道hadoop软件必须安装在所有这20台机器上。
但我的问题是，将文件xyz.txt加载到Hadoop Cluster涉及到哪台机器。客户端机器是否是一台独立机器。我们需要在那台clinet机器上安装Hadoop软件吗？客户端机器如何识别Hadoop集群？
浏览 1提问于2014-03-07得票数 14
我在CentOS linux中有一个5节点hadoop集群。我写了一张地图，还原并编译了这个罐子。我需要将JAR部署到哪个节点？
提前谢谢。
浏览 7提问于2015-06-15得票数 2
该进程将文件从一个hdfs位置复制到同一集群中的另一个位置。这很好，但是hadoop -cp需要时间。是否可以将其替换为同一群集的distcp。或者有没有更好的解决方案来提高性能。
浏览 5提问于2017-12-05得票数 0
回答已采纳
我是Hadoop环境的新手。是否有人可以帮助我使用hive查询将表数据从一个Hadoop环境(prod)传输到另一个Hadoop环境(dev)，并使用oozie调度该查询。
浏览 6提问于2019-08-29得票数 0
是否有Sqoop连接到不同的Hadoop集群，从而可以创建多个Sqoop作业来将数据导出到多个hadoop集群？
浏览 1提问于2017-06-18得票数 0
回答已采纳
6回答
我有两个HDFS设置，并且希望将一些表从HDFS1复制(而不是迁移或移动)到HDFS2。如何将数据从一个HDFS复制到另一个HDFS？可以通过Sqoop或其他命令行实现吗？
浏览 4提问于2015-08-07得票数 26
Hadoop集群是机架的集合。每个机架是包含一个NameNode，还是整个群集只有一个NameNode？
浏览 13提问于2016-06-02得票数 1
1回答
我有一个源emr集群，其中包含配置单元元存储作为外部mysql ( emr版本3.1 )。
我们计划将集群升级到5.11.1。有人知道如何使用远程mysql元数据将hive和hdfs从一个群集迁移到另一个群集吗？
浏览 10提问于2018-02-12得票数 0
当我创建配置单元表时，是否会在Hadoop群集的所有节点上创建该表？当我将数据加载到表中时，数据是否会跨所有这些节点进行复制？
我猜是吧？
浏览 1提问于2015-09-15得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
