腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(8795)
视频
沙龙
1
回答
我
可
以为
亚马逊
雅典娜
使用
S3
端点
吗
?
、
、
我
想知道是否可
以为
AWS Athena配置一个
端点
到
S3
(
S3
端点
),而不是VPC
端点
。
我
已经在文档中到处寻找它,但我找不到它。这有可能
吗
? 我们的想法是
使用
端点
来获取所有
雅典娜
查询的
S3
。
浏览 6
提问于2021-10-15
得票数 1
回答已采纳
1
回答
BI工具的AWS
雅典娜
表
、
、
我
为我们的数据做了ETL,并在
雅典娜
做了简单的聚合。我们的计划是
使用
我们的BI工具从
雅典娜
那里访问这些表。它现在起作用了,但我担心这些表是静态的,也就是说,自从
我
上次创建
雅典娜
表以来,它们只反映数据。当被调用时,
雅典娜
表是否再次自动运行?如果不是,如何使它们在我们的BI工具调用时自动更新? 到目前为止,
我
唯一的覆盖表的解决方案是运行两个不同的查询:一个查询删除表,另一个查询重新创建表。因为这是两个不同的查询,
我
不确定你是否能同时运行(
浏览 4
提问于2022-10-27
得票数 0
回答已采纳
2
回答
从不同帐户的Python Lambda访问AWS Athena
、
、
、
、
我
有两个帐户A和B。
S3
Buckets和
雅典娜
视图在帐户A中,Lambda在帐户B中。
我
想从
我
的Lambda中呼叫
雅典娜
。
我
还允许在
S3
存储桶策略中
使用
Lambda执行角色。'State': 'FAILED', 'StateChangeReason': 'SYNTAX_ERROR: line 1:15: Schema db_name does not exist&
浏览 0
提问于2020-03-03
得票数 0
1
回答
亚马逊
雅典娜
如何从
S3
选择新文件/记录
、
、
我
不时地在
亚马逊
S3
上添加文件,
我
正在
使用
亚马逊
雅典娜
对这些数据执行查询,并将其保存在另一个
S3
存储桶中作为CSV格式(聚合数据),
我
正在尝试找到方法让
雅典娜
只选择新数据(这是
雅典娜
以前没有查询过的)
我
尝试在被
雅典娜
选中后更新记录,但在
雅典娜
中不支持更新查询。有什么办法可以解决这个问题
吗
?
浏览 18
提问于2020-09-07
得票数 1
回答已采纳
1
回答
我
在AWS Athena上创建的这个表/视图是否会随着
s3
中的数据更新而刷新
、
、
、
、
我
正在准备数据从
亚马逊
雅典娜
使用
s3
存储桶。
S3
上的.My数据每天都在更新,所以我需要
亚马逊
雅典娜
来获取updated.so,这样
我
的视觉效果也会更新。
浏览 3
提问于2018-09-26
得票数 0
1
回答
不同区域有桶的AWS
雅典娜
表失效
我
需要查询除
雅典娜
运行的区域以外的其他区域的数据。位置'
s3
://mybucket/data/‘。(工作)
我
需要从eu-central-1位置‘
s3
浏览 1
提问于2018-02-09
得票数 2
回答已采纳
2
回答
如何确保
雅典娜
生成具有bucket-owner-full控制
S3
对象
、
、
、
我们(帐户A)想通过编程的方式在不同的
亚马逊
网络服务帐户(帐户B)中触发
雅典娜
查询(StartQueryExecution),我们
使用
假定的角色来实现。在
雅典娜
查询完成后,我们期望结果应该写入我们的
亚马逊
网络服务帐户
s3
存储桶(帐户A)。我们设法做到了这一点,方法是设置两端IAM策略,允许B写入A的
S3
存储桶。但是,帐户A中的
S3
对象似乎仍归帐户B所有,帐户A中的用户/角色无权访问这些对象。
我
在考虑任何一种方法来解决这个问题
浏览 1
提问于2019-06-13
得票数 3
2
回答
查看
S3
分析时是否考虑对
雅典娜
的查询?
、
、
、
我
有几个按日期分区的
雅典娜
数据库和表。
我
想将底层的
S3
存储桶移动到不同的存储类中,这取决于这些表的查询频率。
我
正在考虑在这些表的底层存储桶上启用
S3
存储类分析。
我
想知道在
使用
亚马逊
S3
分析查看底层
S3
存储桶的数据访问模式时,是否会显示对这些表/分区的
雅典娜
查询。例如,如果
我
查询一个
雅典娜
表10次,并查看底层
S3
存储桶的
浏览 33
提问于2020-07-17
得票数 0
回答已采纳
1
回答
哪一个数据库适合于提供带卷的大时间序列度量?
、
我
有一个大型mysql表,其中包含了大量主题的日常度量。下面是一个假设模式:subject_id INTmetric2
我
想要的是为任意日期范围找到顶级X主题(通过特定的度量)。无论
我
如何索引/分区它,仍然会有一些场景会使查询运行很长时间(例如,用户选择过去的365天时间)。其目标是在几秒钟内完成查询,以便能够实时地为仪表板供电。
我
试着用Aurora (MySql)来实现这个功能,但是
我
并没有对其进行优化,使其运行速度几乎达到所需的速度。 似
浏览 0
提问于2018-06-07
得票数 -1
回答已采纳
1
回答
S3
上的级联文件
、
我们在一个
s3
文件夹中获得了几个文件(130 K文件,合并大小为2GB )。每个文件都有Json数据,可以是一个或多个记录。
我
需要将这些文件合并到一个Json文件中,并将其存储在
s3
上。
我
不想把文件下载到本地机器,然后合并。有什么方法可以用来完成
吗
?
浏览 0
提问于2019-10-22
得票数 3
1
回答
有没有办法在AWS Athena
S3
路径中指定前缀?
、
、
、
我
正在尝试
使用
亚马逊
雅典娜
通过
S3
桶,其中有两种文件。
我
只想让
雅典娜
盯上a.file.txt创建表的时候可以在控制台中指定
吗
? 谢谢
浏览 0
提问于2017-10-30
得票数 2
1
回答
利用AWS
雅典娜
表中的数据和实时数据进行预测
、
、
、
我们的客户将病人当前的重要信息发送到AWS SageMaker推断
端点
,以预测患者未来的健康状况。病人数据被保存到AWS
S3
桶中,我们
使用
雅典娜
从保存的数据构建一个表。有谁知道
我
如何查询Athena表来提取给定的病人历史生命信息,并将历史和当前的重要信息发送到AWS的Sagemaker推断
端点
进行预测?
浏览 1
提问于2022-06-07
得票数 0
回答已采纳
1
回答
将
亚马逊
S3
网站
端点
限制为CloudFront
、
是否可以将
亚马逊
S3
网站
端点
限制为仅限CloudFront?
我
认为这对于
S3
rest
端点
是可能的,但我想知道是否有任何新的解决方案可
以为
S3
网站
端点
做到这一点。
浏览 22
提问于2019-04-16
得票数 0
回答已采纳
2
回答
从
亚马逊
S3
创建表时,
雅典娜
如何将数据与正确的字段相匹配?
、
、
我
还在努力理解
雅典娜
,所以如果这个问题没有意义,
我
很抱歉。
我
正尝试从上传到我的
亚马逊
S3
存储桶的csv文件在
雅典娜
创建一个表。在Athena上创建表的过程中,
我
需要定义字段名和数据类型。这些字段与存储在
亚马逊
S3
存储桶中的字段如何匹配?只是它们在csv中出现的顺序
吗
?
浏览 28
提问于2021-09-13
得票数 0
1
回答
关于
雅典娜
的AWS lambda查询不返回任何内容
、
、
、
、
我
正在尝试制作一个包含对
我
的
雅典娜
数据库的查询的Python (
我
创建了一个
S3
桶作为输出)。
我
看到了一些基本的教程,并得到了以下代码:import boto3 client'Database' : 'raw' ResultConfiguration = {
浏览 3
提问于2021-06-01
得票数 1
回答已采纳
1
回答
红移拷贝还是快照?
、
、
我
正在考虑
使用
AWS Redshift让用户提交对旧的存档数据的查询,而这些数据在
我
的网页上是不可用的。
我
要处理的所有用户的总数据是几of。数据已经在
s3
存储桶中,按周拆分成文件。为了降低成本,
我
应该
使用
快照并在不
使用
时删除集群,还是应该有一个较小的集群,在运行查询时不保存所有数据,而只将数据从
S3
复制到临时表中?
浏览 1
提问于2017-07-02
得票数 0
2
回答
S3
中需要用于电子病历或红移上的机器学习的压缩数据
、
、
我
在
S3
存储中有大量压缩格式的CSV文件。出于机器学习的目的,
我
只需要数据中列的一个子集。如何在不传输整个文件的情况下将这些列提取到EMR中,然后再提取到Redshift中?
我
的想法是将所有文件处理到EMR中,然后提取子集并将所需的列推送到Redshift中。但这需要很长时间。请让
我
知道是否有优化的方式来处理这些数据。 编辑:
我
正在尝试
使用
Kafka自动化这个管道。比方说,一个新的文件夹被添加到
S3
中,它应该在EMR中
使用
spark进
浏览 3
提问于2019-03-19
得票数 0
2
回答
红移频谱/您试图访问的存储桶必须
使用
指定的
端点
进行寻址
、
、
我
在
S3
中创建了一个拼花文件,并在Redshift /谱中创建了一个指向它的外部表。
我
的
S3
桶和红移集群都在我们中间-west-2。
我
在创建架构时指定了选项区域。查询在
雅典娜
.中运行顺利详细信息: 错误:
S3
查询异常(Fetch)代码: 15001上下文:HTTP响应错误代码: 301消息: PermanentRedi
浏览 2
提问于2017-08-11
得票数 1
1
回答
如何在AWS上运行对
S3
数据的删除和插入查询
、
、
、
因此,
我
有一些关于
S3
的历史数据,格式为..csv/..parquet。每天,
我
都在运行
我
的批处理作业,它为
我
提供了两个文件,其中包含需要从历史快照中删除的数据列表,以及需要插入到历史快照中的新记录。
我
无法在
雅典娜
上运行插入/删除查询。有哪些选项(成本效益高,由aws管理)
我
必须执行
我
的问题?
浏览 0
提问于2020-08-10
得票数 2
回答已采纳
3
回答
查询
S3
使用
雅典娜
或DynamoDB记录内容
、
、
、
我
有一个从
S3
日志查询请求url的用例。
亚马逊
最近引入了
雅典娜
来查询
S3
文件内容。在成本和性能方面,最好的选择是什么?
使用
雅典娜
查询
S3
文件以获取请求urls 将每个文件的元数据与请求url信息存储在DynamoDB表中以供查询
浏览 1
提问于2017-07-25
得票数 5
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
AWS 瘫痪:DNS 被 DDoS 攻击了 15 个小时
如何从Pandas迁移到Spark?这8个问答解决你所有疑问
游戏充值将启动实名认证+人脸识别双保险?玩家:充钱还不让?
Pinterest 推出高效可扩展云原生系统 MemQ
怎样让API快速且轻松地提取所有数据?
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券