15/10/12 11:46:07 INFO mapreduce.JobSubmitter: Cleaning up the staging area /tmp/hadoop-yarn/staging/(JobSubmitter.java:597)
at org.apache.hadoop.mapreduce.JobSubmitter.writeSplits(JobSubmitter.javaorg.apache.hadoop.mapreduce.Job$10.run(Jo
浏览 1提问于2015-10-12得票数 0
2回答
我目前已经构建了一个Flex/PHP/MySQL应用程序，我从我的Hadoop集群中提取并转储到MySQL表中。随着我的数据集不断增长，这有几个问题。我正在寻找一个更强大的开源解决方案，因此我已经开始研究HBase，以及如何利用PHP或Java将我的数据提取到可视化应用程序中。
你们中有没有人在Hadoop或HBase之上构建过可视化平台？
浏览 0提问于2010-11-18得票数 0
2回答
我正在寻找将数据移动到HDFS系统的方法，想知道Apache Sqoop是否可以用于从外部REST服务中提取数据？
浏览 2提问于2014-10-01得票数 1
2回答
我尝试通过sqlContext.read.format("json")方法连接到Oracle。一切都很顺利，但在创建JDBC字符串时，我必须在字符串中指定数据库的用户名和密码：但是，我在HDFS上有一个包含密码的jceks文件。我想知道是否有任何方法可以利用该文件来连接到JDBC，而不是纯文本密码？就像在Sqoop中，我们可以这样做：
sqoop import -Dhadoop.security.credentia
浏览 28提问于2017-08-01得票数 1
回答已采纳
我是hadoop的新手。但我有个问题。在我的mysql数据库中，每个表都有大约200k行。因此，对于查询处理，应用程序非常慢。我计划在hadoop上工作。如何将mysql转换为HDFS
浏览 0提问于2014-12-25得票数 0
2回答
我正在用Hadoop编写一个程序，它使用MySql从dfs读取数据。我在运行时收到以下消息： at java.net.URLClassLoader.findClassNative Method)当我在没有Hadoop我把mysq
浏览 2提问于2015-05-29得票数 0
我想在/usr/local/mysql之外的相同位置安装mysql。运行命令'sudo bin/mysqld --defaults-file=/home/hadoop/app/mysql-5.7.19-linux-glibc2.12-x86_64/my.cnf --initializelocalhost: Pl)v)1&Zhl+D
`2017-10-10T02:21:29.369007Z 1 [ERROR] 1 C
浏览 1提问于2017-10-10得票数 1
现在，我所要做的就是，在运行上述命令时，我不希望将输出数据存储在由haddop默认创建的文本文件中，而是希望将数据保存到MYSQL数据库中。因此，我在reducer.py文件中编写了一些python代码，直接将数据写入MYSQL数据库，并试图通过删除如下的输出路径来运行上述命令 $HADOOP_HOME/hadoop-s
浏览 0提问于2012-11-08得票数 4
回答已采纳
我使用的是Ubuntu 12.04，hadoop-0.23.5，hive-0.9.0。我将我的metastore_db分别指定到hive-site.xml中的某个其他地方的$HIVE_HOME/my_db/metastore_db
Hadoop运行良好，jps提供了ResourceManagerjava.net.ConnectException: Connection refused) FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.q
浏览 1提问于2013-01-20得票数 2
回答已采纳
我试图在Windows 8平台上将ApacheNutch2.1与Mysql服务器集成。我遵循教程。我对apache 2.1做了如下修改。我下载了apache-nutch-2.1-src.zip并提取了。在ivy/ivy.xml中没有注释
为mysql conf/gora.properties注释sql属性并添加gora属性。gora.sqlstore.jdbc.driver=com.mysql.jdbc.Driver gora.sqlstore.jdbc.url=jdbc:mysql</e
浏览 1提问于2013-06-15得票数 0
从tomcat日志中提取的字段很少，而从Apache日志中提取的字段很少。我需要根据时间戳合并/map提取的字段，并将这些映射字段导出到传统的关系数据库(例如，MySQL )。我可以使用正则表达式或pig来解析和提取信息。我面临的挑战是如何将从两个日志中提取的信息映射到单个聚合格式或文件，以及如何将这些数据导出到MYSQL。将此数据导出到MySQL。
2)在hadoop中使用Hbase或Hive以表格的形式存储数据，并导出到
浏览 2提问于2010-06-21得票数 1
回答已采纳
2回答
Rest与sqoop
、、、
我试图将数据从mysql导入到hdfs。我能够使用sqoop完成这一任务，但这也可以通过从api获取数据来完成。
我的问题是何时使用rest 来加载hdfs中的数据，而不是sqoop。
浏览 1提问于2018-09-04得票数 1
我想使用sqoop将配置单元表选中的数据传输到mysql表。
请指导我怎么做？
浏览 1提问于2012-05-17得票数 0
回答已采纳
1回答
我已经提取了如下文档中记录的have sqoop docker容器：
"create link -c generic-jdbc--c“对此还有其他前提要求吗？
Thx
浏览 6提问于2016-12-18得票数 0
1回答
我已经将连接器jar (mysql-连接器-java-5.1.49-bin.jar)和脚本上传到~/home/hadoop文件夹。scala> :require /home/hadoop/mysql-connector-java-5.1.49-bin.jar
Added '/home/hadoop/mysql-connector-javascala> :load /home&#
浏览 13提问于2020-10-09得票数 0
回答已采纳
3回答
我想知道使用MySQL集群和使用Hadoop框架的优缺点。什么是更好的解决方案。我想听听你的意见。我认为使用MySQL集群的优点是：
您也可以使用商品硬件。因此，在我看来，对于处理大数据，MySQL集群是更好的解决方案。为什么Hadoop是处理大数据的圣杯？
浏览 7提问于2014-01-29得票数 2
2回答
由于MySQL视图没有像人们所希望的那样优化，所以我想使用原始SQL来查看它是否提高了性能。at org.apache.hadoop.mapred.MapTask.run(MapTask.java:364) at org.apache.hadoop.mapred.Child.main(Child.java:249)
Caused by(SQLError.java:1
浏览 2提问于2013-09-28得票数 1
回答已采纳
我试图安装Apache，我将HIVE_HOME和HADOOP_HOME插入到hive_config.sh中，并将一些Hive复制到$HADOOP_HOME/lib中，但是当我试图使用hive命令启动它时at org.apache.hadoop.hive.ql.session.SessionState.start(SessionState.java:346)
at org.apache.hadoop.hive.cli.CliDriver.runat org.apache.hadoop.hive.m
浏览 4提问于2015-02-24得票数 5
回答已采纳
我在一个基于社交网络的应用程序上工作，这是使用Apache web服务器和MYSQL服务器的数据库与codeigniter MVC框架。我不知道如何将Hadoop集成到这个应用程序中，也不知道如何编写map- reduce程序。
浏览 0提问于2011-08-09得票数 16
1回答
我是hadoop的新手，关于从edgeNode().hadoop jar ${JAR_FILE} {CLASS_NAMEWithPackage}运行hadoop命令，我有以下问题。有以下问题
在运行上述命令之后，为什么在Djava.io.tmpdir中提取jar，edgeNode中的dir？每次运行这个命令时，我都会得到一个目录，类似于temp中的hadoop-unjar7637059002474165348，它提取了预期的jar.Is吗？我以为hadoop会将整个
浏览 6提问于2017-09-17得票数 0
回答已采纳
云服务器
ICP备案
云直播
即时通信 IM
对象存储
腾讯云开发者
