1回答
我通过一个Python应用程序向Athena发起了几个并发查询。 考虑到雅典娜的查询历史，似乎雅典娜确实同时接收并同时处理多个查询。然而，事实证明，整个查询运行时间与一个接一个地发送查询没有太大不同。02:25 17s 22:02:42
query_3 22:02:25 17s 22:02:42 根据这些结果，在第二种情况下，<
浏览 23提问于2019-04-15得票数 1
我们有多个用户同时向AWS Athena提交查询。是否有雅典娜CLI允许我们找到提交者，给出一个查询执行id？
基于AWS雅典娜博士，这似乎是不支持的。
浏览 3提问于2022-05-22得票数 0
1回答
我为我们的数据做了ETL，并在雅典娜做了简单的聚合。我们的计划是使用我们的BI工具从雅典娜那里访问这些表。它现在起作用了，但我担心这些表是静态的，也就是说，自从我上次创建雅典娜表以来，它们只反映数据。当被调用时，雅典娜表是否再次自动运行？如果不是，如何使它们在我们的BI工具调用时自动更新？
到目前为止，我唯一的覆盖表的解决方案是运行两个不同的查询:一个查询删除表，另一个查询重新创建表。因为这是两个不同的查询，我不确定
浏览 4提问于2022-10-27得票数 0
回答已采纳
1回答
雅典娜查询非常慢。
、、、、
然后我想使用雅典娜查询数据。就像这样，From Table 这个查询比预期的要慢得多。我认为这是缓慢的，因为雅典娜必须搜索整个胶水目录寻找正确的文件(即文件的全面扫描)。
下面的查询非常快。不到一秒钟。
浏览 13提问于2022-03-06得票数 3
1回答
我试图使用雅典娜作为批处理执行AWS雅典娜查询。我能够建立连接，单独运行查询，但不知道如何作为批处理运行3个查询。任何帮助都很感激。查询 2.select * from table2 limit 2
3.select * from table3 limit 2
浏览 0提问于2018-11-27得票数 4
回答已采纳
1回答
目前我正在AWS雅典娜上工作。我们有一个网页，将显示查询结果。存储在s3桶中的数据作为数据湖AWS的一部分被摄取。
从我们的网页，多个请求/查询将抛给AWS雅典娜。由于这是实时查询，所以我不会在处理过程中保存查询，而是使用lambda函数执行从网页传递的查询，然后显示结果。我们面临的限制是，当多个请求命中时，每个查询结果都存储在具有唯一UUID文件名的s3中，如何从s3桶
浏览 5提问于2020-06-01得票数 2
回答已采纳
我有一个计划作业，运行一个AWS雅典娜查询，并将结果作为一个csv保存到S3中。我需要将结果文件分割成多个文件(这样我就可以并行地处理它)。
雅典娜能把结果分割成多个文件吗？
浏览 0提问于2018-10-05得票数 1
回答已采纳
4回答
雅典娜查询S3数据的备选方案
、、、、
因此，我们决定使用AWS批处理(码头容器)和雅典娜。每个国家有一份工作需要一天的数据。
现在大约有1000作业，它们一起启动，当它们查询雅典娜读取数据时，容器失败，因为它们到达雅典娜查询限制。如果我使用红移群集，请将那里的所有数据和所有容器查询加载到Redshift集群，因为它们没有查询限制。但是它是昂贵的，而且要花很多时间才能完成。另一种选择是读取EMR上的数据，并在其之上使用Hive或Presto查询数据，但同样会达到查询
浏览 1提问于2019-08-01得票数 3
回答已采纳
2回答
查询s3存储桶中的大文件
、、、、
我需要查询文件中的数据，提取一些数据，以及对数据进行一些处理。AWS Athena通常用于在s3中查询数据，但是否还有其他方法？雅典娜对我来说似乎没有什么帮助，因为文件很大。
浏览 0提问于2020-04-30得票数 0
接下来，这些处理过的数据将是摘要(简单计数、平均值等)&，然后在交互仪表板中可视化。对于交互式查询部分，我想知道哪种工具最适合我的结构化和事务性数据(存储在Parquet格式中)-
AWS Athena (基于Presto的无服务器SQL查询
浏览 0提问于2017-12-28得票数 7
回答已采纳
1回答
根据，您可以一次提交多达20个相同类型的查询，但这是一个软限制，可以根据请求增加。我使用boto3与雅典娜进行交互，我的脚本提交了16个CTAS查询，每个查询大约需要2分钟才能完成。在AWS帐户中，只有我在使用雅典娜服务。然而，当我通过控制台查看查询的状态时，我发现尽管所有查询都处于状态Running，但实际上只有少数查询(平均5个)正在执行。以下是Athena hisotry选项卡中通常可以看到的内容：我了解到，在我向雅典娜</e
浏览 3提问于2019-07-22得票数 18
回答已采纳
我一直在使用AWS雅典娜查询存储在S3上的多个表中的分析数据。在一段时间内，我提出了2-3个复杂的SQL查询(涉及几个联接)来提取相关数据。由于雅典娜是用于临时查询(而不是预定义查询)，除了处理几个TB和30分钟超时的高昂成本外，我还在寻找替代方案。
执行ETL (例如通过AWS Glue
浏览 0提问于2018-08-03得票数 4
1回答
我正在尝试使用雅典娜查询AWS S3 。如果我只有一个源桶，我就能做到这一点。我不知道如何将其配置为与多个源存储桶一起工作。//options ignored因此，如果我想查询多个源桶的库存数
浏览 0提问于2019-04-23得票数 3
回答已采纳
1回答
我在S3中使用AWS雅典娜+ AWS Glue + Parquet，当我修改在AWS中声明的模式时，雅典娜不查询新数据。例如。one: value1, value1(expected)three: null, value3问题是为什么雅典娜不从实际存在的拼花文件中提取三列值(第二个文件)，以及如何使它工作？在调查期间，我发现了在SO上，但它是与火花，而不是雅典娜，这是合乎逻辑
浏览 6提问于2022-05-27得票数 0
我正在尝试查询AWS雅典娜控制台中的DB中的表。该表正在从一个桶读取文件。当我运行这个查询时：我的查询似乎超时了，因为在运行计数时，返回的行数为19亿行我和OFFSET一起尝试过LIMIT，但在AWS雅典娜似乎不起作用。不确定如何使用SELECT对这么大的数据集进行块处理？
这里的目的是能够查询</
浏览 1提问于2019-12-04得票数 1
回答已采纳
1回答
当我试图连接并一起订购两张桌子时，我遇到了雅典娜的问题。在做了一些研究之后，我意识到ORDER BY可能会减慢我的查询速度，但即使我取出它，它仍然超时。同时，我需要ORDER BY来组织我的数据，因为我将把它转换成csv文件。我还读到，我可以拆分我的查询，以便使用不同的工作者，并利用雅典娜的并行工作能力，但我不知道确切地知道如何在雅典娜中做到这一点，所以如果有人可以详细说明和解释如何做到这一点，那将是完美的。然而，从不同的帖子上我看到同样的问题，他们正
浏览 2提问于2021-11-24得票数 0
1回答
我计划将OCR数据存储在Dynamo中，并在其中执行搜索查询。
我所面临的问题是因为发电机db项的大小限制，限制在400 db以内。
浏览 1提问于2020-04-06得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
