1回答
我在impala中有一个关于数据局部性的问题，假设我有10个数据节点的集群(在每个数据节点上有impalad)，如果我在impala SELECT * FROM big_table where dt='假设分区(dt=2017')下的文件在dn 1,3,5中，那么如果我要执行查询，协调器是只使用守护进程1,3,5进行数据定位，还是使用所有的守护进程，而其他守护进程将远程读取此数据？
浏览 9提问于2017-02-10得票数 2
2回答
当理想的数据位置或布局在表创建时为所知时，我希望避免Impala节点不必要地从网络上的其他节点请求数据。(百分位数)在Impala-SQL中，我不确定"PARTITIONED“子句是否提供此特性。据我理解，Impala在HDFS上将其分区块分割成单独的文件，但HDFS不保证默认情况下相关文件或块的共存(相反，要实现相反的目标)。找到了关于Impala对
浏览 0提问于2014-02-15得票数 3
回答已采纳
2回答
我是大数据和相关工具/技术的新手。我在查黑斑羚的资料。
说Impala是一个集群柱状数据库是真的吗？而Impala需要大量内存来计算/转换数据？
浏览 4提问于2017-04-28得票数 1
回答已采纳
如果我错了，请纠正我，但是通过Impala SQL所做的元数据更改将从Impala Catalog服务传播到Impala Daemons。
浏览 0提问于2019-07-16得票数 0
回答已采纳
我正在开发NRT解决方案，它要求我经常更新Impala表上的元数据。
目前，此无效是在我的火花代码运行后完成的。我希望通过直接从我的Spark代码执行刷新/无效操作来加快速度。
浏览 3提问于2016-07-06得票数 5
回答已采纳
我使用一个S3位置和一个分区创建了一个带有Impala的表，但是在查询时没有填充任何数据。我该如何克服这个问题呢？create table t(id int, name string) partitioned by (year int)location 's3a://impala-
浏览 0提问于2017-07-28得票数 0
我试图查询从另一个系统导出的Impala中的数据。到目前为止，它被导出为一个管道分隔的文本文件，通过创建带有正确分隔符设置的表，在文件中复制，然后运行refresh语句，可以导入该文本文件。我们遇到了一些问题，有些字段有断行字符，这使得我们看起来有更多的数据，而且它不一定适合我创建的元数据。-rw-r--r--+ 1 UserName Domain Users 20M Jan
浏览 0提问于2019-01-23得票数 0
1回答
我已经使用sqoop将所有表导入到一个"sqoop_import“数据库中，它能够看到所有导入的表，如下所示：OK
Time taken: 0.026
浏览 1提问于2018-07-22得票数 0
我最近开始研究使用Hive和Impala查询HDFS上的大量CSV数据。正如我所期望的那样，与Hive相比，我使用Impala获得了更好的响应时间，对于我到目前为止使用的查询。我想知道是否有一些类型的查询/用例仍然需要Hive，而Impala不太适合。
与Hive相比，Impala如何为HDFS上的相同数据提供更快的查询响应？
浏览 2提问于2013-05-26得票数 57
回答已采纳
1回答
我有一个带有SAS的应用程序，我从Oracle中提取数据，并使用基本SAS和SAS宏生成报告到excel。现在的问题是，我的数据库一天比一天大，从Oracle获取数据花费了更多的时间，导致我的作业运行缓慢。
因此，我希望我的应用程序构建在Hadoop上，以便进行报告和分析。
浏览 1提问于2015-01-12得票数 0
我正在遵循this解决方案将外部表加载到Impala中，因为如果我通过引用文件加载数据，则会得到相同的错误。
浏览 73提问于2020-09-03得票数 0
回答已采纳
1回答
当您为Hadoop的Map/Reduce部分提供不同于HDFS的存储(如MySql服务器等)时，它的数据局部性特性会发生什么？换句话说，我的理解是Hadoop Map/Reduce使用数据局部性来尝试在数据所在的同一节点上启动映射任务，但是当数据存储在sql服务器中时，任务节点上没有本地数据，因为所有数据都在sql服务器节点中那么，在这种情况下，我们是失去了数据局部性，还是数据<
浏览 0提问于2012-02-07得票数 2
回答已采纳
5回答
我刚刚创建了EMR集群，并尝试创建我的第一个Impala表。获取此错误:此Impala守护进程未准备好接受用户请求。状态:正在等待来自StateStore的目录更新。有什么建议吗？d0bf3eae1df0f437bb4d0e44649293756ccdc76c)Query: show tables
ERROR: AnalysisException: This Impala
浏览 0提问于2014-05-05得票数 3
1回答
重新启动Impala服务器后，我们无法看到表(即表没有出现).Anyone帮助我我们必须遵循什么顺序才能避免此问题。
谢谢，斯里尼瓦斯
浏览 0提问于2017-04-01得票数 0
1回答
我必须将一些Impala shell命令迁移到Hive。它们是非常简单的命令，但我对它们有点迷惑，因为我知道它们每一个都做了什么，但我不知道它们在Hive中的等效形式。TABLE=$(impala-shell -i ${server} --delimited --quiet -q "select concat(db_normalized,'.'from parametric_table where source='testSource' and product='testProduct'
浏览 4提问于2021-07-19得票数 0
回顾Kubernetes上Spark的数据局部性问题:如果Spark pods与HDFS数据节点pods位于相同的节点上，那么数据局部性是否有效？
这里的问答环节：似乎并不这么认为。
浏览 6提问于2021-11-24得票数 0
我被困在下面的问题上，(a)数据访问的时间局部性低我理解时态局部性，但我无法理解它对于数据访问和指令获取意味着什么。
浏览 5提问于2011-10-17得票数 1
回答已采纳
1回答
我已经使用hql创建了一个数据库，并且正在创建中。但我不能从impala应用程序中使用该数据库。但是表存在于hive中，我们可以在那里查询它。此问题仅在某些新创建的表中出现。有人能帮帮忙吗？
浏览 1提问于2016-05-12得票数 0
云服务器
ICP备案
对象存储
云点播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号