2回答
配置单元中的增量更新
、、、
我有一个源MySql表。出于分析目的，我必须将数据导出到Hive。最初，当MySQL中的数据较小时，使用Sqoop将Mysql数据完全导出到Hive不是问题。现在，随着我的数据大小的增长，我如何将MySql数据增量更新到hive？
浏览 0提问于2016-05-03得票数 0
2回答
我正在尝试使用sqoop将Hbase表导出到mysql表。以下是我的查询：> --connect jdbc:mysql://mysqlserver_ip:3306/mysqldb > -
浏览 3提问于2013-07-09得票数 1
我在HDFS中有一个以制表符分隔的文本文件，并希望将其导出到MySQL表中。
由于文本文件中的行没有数字ID，如何使用SQL INSERT (自动增量)期间自动设置的ID导出到表中？
浏览 2提问于2012-04-11得票数 5
回答已采纳
2回答
我正在尝试对hive表执行sqoop增量导入(lastmodified)。它在sqoop 1.4.5中工作，但在sqoop 1.4.6中不工作。:2011年11月13日17:57:58 +0530 2017 --incremental lastmodified option for hive
浏览 3提问于2017-11-13得票数 2
回答已采纳
1回答
我在存储在HDFS中的dataset上使用了Pig和Hive进行MapReduce操作。现在，我希望将该输出传输到MySQL表中。
如何将输出传输到MySQL？
浏览 0提问于2018-04-28得票数 0
回答已采纳
1回答
如何将增量数据加载到已分区的配置单元表中id bigint,created_on string(yyyy-MM-dd),我已经创建了一个sqoop作业，根据上次修改日期以增量方式导入
sqoop job --create users -- import --connect jdbc:mysql://<ip>/product --dri
浏览 5提问于2016-11-18得票数 0
我使用Sqoop增量导入，每天将数据输入到我的hive表中。中，使用Sqoop增量导入，通过cron作业将数据导入到shell脚本来完成工作。DATE=$(date +"%d-%m-%y")sqoop import --connect jdbc:mysql</home/cloudera/Desktop/MyScripts/tab
浏览 2提问于2017-04-17得票数 1
回答已采纳
3回答
sqoop与hdfs命令
、、、
据我所知，Sqoop命令用于将数据从MySql等数据库导入到HDFS，反之亦然；HDFs命令用于处理HDFS中的数据，例如从HDFS获取数据到本地文件系统，反之亦然。
浏览 0提问于2017-01-29得票数 0
1回答
我有psudeo分布式hadoop环境，并使用sqoop和hive进行数据导入和分析。我使用sqoop将数据从mysql导入到蜂箱中，它起作用了，我在我的蜂巢位置(也就是/user/hive/warehouse/ )获得了数据，我可以在hive表中看到数据。我的怀疑是：
为什么它要在我的hdfs中创建/user/hive
浏览 5提问于2017-01-11得票数 0
1回答
MySQL中的单元外部表
、、、
目前，我正在执行以下步骤(hadoop 1.1.2、Hive 0.11和Sqoop-1.4.3.bin__hadoop-1.0.0)：
我想知道是否可以将步骤2和步骤3--直接写入MySQL数据库的Hive查询的输出--结合起来。线程谈到JDBC，但找不到同样的Hive</em
浏览 1提问于2013-07-18得票数 1
0回答
我正在尝试根据mysql表中的记录更新配置单元表。Fitness4 Apparel6 Outdoors我正在尝试使用sqoop，在department_id 8中使用增量更新将mysql表中的最后一条记录导入到hive表中。-password xxx --table delimiter_test --hive-import --hive-table my_test --split-by depart
浏览 12提问于2016-12-28得票数 0
回答已采纳
2回答
port}/sqoop \ -- import --null-string "null" --null-non-string "null" --mysql-delimiters--hive-drop-import-delims \ --incrementalcolumnId \
--target-di
浏览 2提问于2020-01-17得票数 0
1回答
增量附加到文件
、、、
我在MySQL中有表，我想使用sqoop导入数据。我导入了数据并以file的形式存储在file中。现在，我想在hdfs中对这个文件运行增量更新。I am talking about files not Hive tables。
我希望增量数据作为单独的文件，而不是合并的文件。我的意思是，我们可以对文件进行增量更新吗？
浏览 3提问于2017-03-17得票数 0
回答已采纳
我需要将数据从HDFS上的拆分文件加载到Oracle数据库。hdfs://XXXXXX/split_files/test_folder/test_table_with_partitions/*drwxrwxrwx - bigsql hdfs 0 2017-07-24 01:00 hdfs://XXXXXX/split_files/test_folder/test_table_with_partitions/tm=2017-07-24/dept=1
drwxrwxrwx
浏览 5提问于2017-07-26得票数 0
回答已采纳
今天，我在mysql中有4列3行的表。我已经将这些数据直接导入到一个蜂巢表中。表测试：1 sam 123 hyd3 red 456 qer1 sam 123 hyd3 red 456 qer现在，我希望hive表与mysql表
浏览 2提问于2017-03-06得票数 0
回答已采纳
2回答
我考虑使用s3将数据从Sqoop导入HDFS，然后使用Sqoop将其导出到RDS表中。我找到了将数据从HDFS导出到RDS的命令。但是我找不到从S3导入拼花数据的方法。
浏览 4提问于2021-09-08得票数 0
回答已采纳
1回答
我在使用sqoop将hive数据导出到mysql时遇到了问题。添加sqoop命令--table {username}
--columns "column1,col
浏览 1提问于2017-03-28得票数 0
回答已采纳
我可以使用Sqoop成功地执行从MySQL到HDFS的增量导入，方法是这是一个bug吗？预期的行为？有没有人有从MySQL增量导入数据并通过配置单元提供数据的过程？
我基本上希望我的Hadoop集群成为我的MySQL数据库的读从服务器，以便进行快速分析。如果除了<em
浏览 0提问于2012-12-28得票数 2
2回答
我正在尝试使用自由形式查询进行sqoop作业的增量导入。下面是正在使用的查询
sqoop job --create importjobinl -- import --connect jdbc:mysql://localhost/test --username当我使用mysql intest而不是--query时，它是有效的，但是我希望使用--query使用unix_timestamp将日期转换为纪元时间，因为mysql表intest中的值是yyyy-mm-dd
浏览 1提问于2015-09-06得票数 0
尝试通过创建sqoop job从mysql到hive进行增量导入，它在命令行中工作得很好，但当我尝试使用oozie执行同样的操作时，它不会更新sqoop的metastore中的incremental.last.value
浏览 4提问于2017-04-28得票数 0
云服务器
ICP备案
对象存储
云点播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号