假设我们使用sqoop中的增量导入将数据从RDMS导入Hadoop，而我们之前在hadoop中导入的一些数据在RDMS中得到了更新，当我们再次使用sqoop增量导入时，我们也获得了Hadoop中已经存在的最近更新的数据，这会导致数据重复，那么在这种情况下使用sqoop导入数据时，我们如何避免数据重复呢？
浏览 1提问于2019-01-23得票数 0
是否有Sqoop连接到不同的Hadoop集群，从而可以创建多个Sqoop作业来将数据导出到多个hadoop集群？
浏览 1提问于2017-06-18得票数 0
回答已采纳
2回答
我正在寻找将数据移动到HDFS系统的方法，想知道Apache Sqoop是否可以用于从外部REST服务中提取数据？
浏览 2提问于2014-10-01得票数 1
我在我的本地目录中有一个csv，我希望创建一个it..The的配置表，问题是csv有很多列...
浏览 0提问于2015-11-08得票数 0
当我从Oracle导入数据时，我想使用--direct参数。是否可以使用--direct选项来使用数据转储/泵实用程序？我需要在我的shell上安装任何Oracle实用程序吗？
浏览 1提问于2014-10-18得票数 0
我需要使用sqoop将外部数据库从mysql导入配置单元。我的需求是使用sqoop import将包含所有表的完整数据库导入到指定的配置单元数据库。例如，我想导入mysql数据库'hadoop_practice‘以及它的所有表到hadoop_practice数据库中。但是，当我执行以下命令时
$ sqoop import-all-tables --connect jdbc:mysql://
浏览 1提问于2015-01-15得票数 0
1回答
我有psudeo分布式hadoop环境，并使用sqoop和hive进行数据导入和分析。我使用sqoop将数据从mysql导入到蜂箱中，它起作用了，我在我的蜂巢位置(也就是/user/hive/warehouse/ )获得了数据，我可以在hive表中看到数据。我的怀疑是：
当我从mysql导入到hive(构建在hadoop之上)时，hadoop中存储的数据会
浏览 5提问于2017-01-11得票数 0
3回答
我正在尝试导入数据(包含两列的简单文件，int和string)，表格外观：id int当我尝试导入时：
hive>: Permission denied: user=hadoop, access=ALL, inode="/user/hive/warehouse/test":hive:hadoop:drwxrwxr-xFailed with excep
浏览 7提问于2012-10-09得票数 2
我们的MySQL和Hadoop平台部署在不同的网络中，Hadoop不能访问MySQL，但是MySQL可以连接到Hadoop。那么，是否有一个工具可以像Sqoop获取数据那样将大量数据从RDS推送到HDFS？或者有没有其他方法可以解决这个问题？
任何帮助都是非常感谢的。顺便说一句，Hadoop集群在我们的网络中使用了一个Kafka主题，通过在两边部署水槽并连接在一起。但是对于海量的RDS数据，如何实现这一点呢？
浏览 1提问于2019-02-20得票数 0
我使用Hadoop来存储我们应用程序的数据。如何在PostgreSql和Hadoop之间同步数据？我使用SymmetricDS作为复制工具。
浏览 0提问于2010-02-17得票数 1
1回答
我将一个表雇员从mysql导入到hdfs，没有任何问题；我将一个不同的表dep_emp导入 hive ，也成功了；我双重检查了蜂窝中只有两个表: myfirsthivetable和dep_emp，没有雇员；然后我尝试将表employees导入hive，但是我收到了错误信息：以下是我的导入查询：
sqoop import --co
浏览 2提问于2016-07-01得票数 0
回答已采纳
2回答
将Server表导入HDFS
、、、、
我是Hadoop的新手，对于使用sqoop将一个表从Server导入到hdfs，我很少有疑问：
如何使用sqoop和其他任何方式将整个数据库导入hadoop。如何导入没有主键的单个表，或者是否可以导入没有主键的Server表。
浏览 5提问于2013-08-07得票数 3
回答已采纳
如何将50 it的RDBMS数据迁移到hadoop中并进行处理？使用hadoop处理50 by数据的最低硬件要求是什么？
浏览 16提问于2019-06-25得票数 0
回答已采纳
1回答
我已经使用Cloudera Manager和CDH 5.4在集群系统上成功地安装了Apache (1个主服务器，2个具有基于Ubuntu的高配置的从站)
我希望将数据从Microsoft导入到HBase(基于列的hadoop数据库)，到目前为止，我已经从server生成了CSV文件，并使用HBase浏览器( Cloudera中的Hue应用程序)将CSV导入到HBase中。如果有任何方法可以直接将SQL server数据导入HBase，这将对我很有帮助，我听说Sqoop应
浏览 5提问于2015-07-27得票数 0
回答已采纳
我的问题是- Apache Hadoop能让Cognos BI工作得更快吗？或者Cognos正在做Hadoop做的相同的事情(MapReduce功能)？有时发生的情况是，如果数据集很大，Cognos会花费很多时间(几乎要死掉)来生成报告。那么，Apache Hadoop能否通过适应Cognos和Sybase之间的某个位置来帮助Cognos更好地执行呢？在这种情况下，报表优化是唯一的出路吗？
谢谢你们。
浏览 0提问于2013-05-12得票数 3
回答已采纳
1回答
目前我有两台机器，其中一台是Horton沙箱，我已经将它配置为名称节点，并将数据节点从它和其他机器上退役，我已经将其作为数据节点，并在其上安装了hive服务器。我的问题是，因为这是我第一次使用hadoop，我的计划是将数据从sql数据库传输到hadoop，所以这是否意味着我必须在datanode上安装mysql，而我将使用sqoop和其他东西?
浏览 0提问于2015-12-02得票数 0
1回答
我们有版本PHD3.0Hadoop集群用于5个节点，使用ambari安装在rackspace上。我们必须迁移到Google。。但没有得到步骤如何进行以下操作Q2：要备份哪些组件和文件夹？什么是命令？Q3：如何备份名称和数据？有什么能帮上忙的吗？
浏览 1提问于2016-11-14得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
