腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如何
在有
JSON
值
的
Amazon
Athena
上
查询
(
搜索
)
sql
?
、
、
、
、
table where properties 'year' = 2007 // is not working //please check the screen shot of the table 我想通过
sql
查询
来
查询
雅典娜数据集。我尝试了所有
查询
,但都不能处理这个雅典娜数据
浏览 28
提问于2019-03-15
得票数 1
回答已采纳
2
回答
如何
在AmazonS3中进行内容级
搜索
、
、
我
的
AmazonS3驱动器中
的
存储桶中有一些文件(.txt、.doc、.xlsx等),是否可以通过我
的
C#应用程序执行内容级
搜索
?也就是说,当我们键入一个字符串并在我
的
应用程序中按下key时,每个在其内容中包含
搜索
字符串
的
文件都应该列出。提前感谢
浏览 0
提问于2017-02-28
得票数 0
2
回答
如何
在AWS
Athena
中通过Glue
查询
嵌套
的
XML文件
、
、
、
、
我希望嵌套
的
XML文件使用AWS glue从AWS
Athena
查询
。
浏览 1
提问于2019-03-22
得票数 1
1
回答
在
Athena
/Quicksight中处理数组
的
高性能方法
、
我目前有一个很大
的
json
数据集,我想导入到
Amazon
Athena
中,以便在
Amazon
Quicksight中可视化。在每个
json
中,有两个字段:一个是逗号分隔
的
In字符串(orderlist),另一个是字符串数组(locations)。因为Quicksight不支持数组
搜索
,所以我现在求助于创建一个跨两个字符串数组生成交叉联接
的
视图: select id, try_CAST(orderid AS bigint) order
浏览 21
提问于2020-10-02
得票数 0
2
回答
亚马逊S3到亚马逊雅典娜到Tableau
、
、
、
我正在做一个项目,将亚马逊S3存储桶中
的
数据放入Tableau。 数据需要从多个.CSV文件中重新组织和组合。亚马逊雅典娜能够直接从S3连接到Tableau吗?它是否相对容易/便宜?我希望可视化
的
数据,并提供一个预测
的
基础
上
观察到
的
趋势(可能需要纳入功能,以生成数据,以适应线性回归)。
浏览 23
提问于2019-07-24
得票数 0
1
回答
处理亚马逊网络服务S3文件
的
体系结构
、
、
、
、
我正在做一个POC,在那里我们有数百万个现有的S3压缩
json
文件(未压缩
的
3+ MB,带有嵌套
的
对象和数组),而且每隔几分钟就会添加更多。我们需要在未压缩
的
数据(每个文件)
上
执行计算,并将其存储到DB表中,然后我们可以在该表中执行一些列操作。SQS键名称创建了一个DB表,因此我可以
查询
该表并使用AWS SDK Node.js包将消息发送到S3主队列。对于新添加/更新
的
文件,S3事件通知将处理它。 我认为上面的架构在我
的
情况下可以工作,但有没
浏览 5
提问于2021-11-28
得票数 0
2
回答
廉价
的
AWS日志聚合器
、
、
我们
的
首席信息官在看到我们
的
AWS法案时心脏病发作了。 我需要从多个EC2 (在伸缩组中)聚合Apache和Tomcat日志--什么是在不破坏银行
的
情况下启动这项操作
的
最佳方法?日志
的
目标是按IP地址、帐户名查看事件,查看事务流(诊断/审计日志记录--与其说是性能指标,不如说是性能指标)。 ELK不在(政治)方程式之外。允许使用Cloudwatch +任何其他功能。
浏览 25
提问于2020-10-01
得票数 3
1
回答
在多个AWS实例
上
运行并行Python代码
、
、
、
、
我没有资源在本地在一个可接受
的
时间框架内运行整个事件。启动AWS实例(EC2?),将输入数据发送给实例,以输入
的
形式运行Python代码,返回结果并在所有实例完成时进行聚合(< code >G29</code>)AWS Lambda是否用于此目的?
浏览 2
提问于2020-04-09
得票数 1
1
回答
如何
使用ETL (AWS Glue)聚合数据,以便我们可以使用
Athena
按特定属性仅为一定百分比
的
数据进行选择
、
、
、
、
如果有更好
的
地方来问这类问题,请让我知道。 我有一个存储和尝试读取文档
的
服务。对于每个文档,该服务将以一定
的
置信度提取和读取行和单词。单个文档(预ETL)
的
有效负载如下所示 { { ... ...
浏览 10
提问于2021-05-07
得票数 0
3
回答
athena
无法读取S3
JSON
对象文件,雅典娜选择
查询
返回
JSON
键列
的
空结果集
、
、
、
我在雅典娜创建了一个结构如下
的
表格 devId string, status”,"type":"lora","status":"huihuhukiyg“} 但是,每当我在select语句下面
浏览 0
提问于2018-10-06
得票数 6
回答已采纳
1
回答
Glue是否需要安全配置才能从加密
的
桶中运行
Athena
查询
?
、
、
、
、
使用默认KMS密钥aws/s3在S3
上
使用服务器端加密以Apache格式存储数据。在Glue中创建数据库和表结构。使用
Amazon
对数据运行
SQL
查询
。如果是,那么我可以根据数据库创建单独
的
安全配置吗?因为每个胶水数据库都会被附加到不同
的
桶
上
,有不同
的
加密密钥。 我可以运行
Athena
SQL
查询
来读取数据,而不需要Glue加密。
浏览 1
提问于2019-07-18
得票数 0
回答已采纳
1
回答
每天更新S3桶
的
最佳AWS方式?
、
、
、
这是当前
的
体系结构: 有一个预先建立<em
浏览 0
提问于2021-07-01
得票数 1
回答已采纳
2
回答
读取S3目录中
的
多个
json
文件,然后将它们加载到MySQL表中
的
最佳方法是什么?
、
、
、
、
我有一个包含40k++
json
文件
的
S3文件夹,其中每个文件都具有以下格式:我
的
目的是读取这些MySQL文件(在一个
json
文件夹中),将它们组合到一个结构化
的
表中,可能是为了执行一些数据转换,然后将它们加载到
json
表中。有没有更快
的
方法在这种数据源<
浏览 2
提问于2019-07-23
得票数 0
1
回答
基于
JSON
到Presto
的
SQL
查询
的
转换
、
、
、
、
我正在创建一个web应用程序,其中有一个分析仪表板,允许生成
查询
。此
查询
将通过公开
的
API转发到后端服务器。此API背后
的
控制器(用Node.js编写)将在AWS
Athena
上
执行此
查询
,以获取所需
的
数据。 现在
的
问题是,我应该
如何
向后端服务器发送
查询
。我应该使用
JSON
格式吗?那么在后台我应该
如何
将
JSON
转换成
SQL
<em
浏览 37
提问于2019-06-18
得票数 1
4
回答
如何
使用Ruby在
Amazon
上
执行
查询
?
、
、
如何
将
Amazon
与Ruby连接起来,并在
Amazon
上
执行
查询
并获得结果。只是为了澄清我在生产
上
的
应用程序,所以将SDK从Ruby改为JRuby并不是一个合适
的
选择。
浏览 7
提问于2017-03-20
得票数 5
回答已采纳
1
回答
在
值
中返回引号
的
Athena
查询
、
、
、
我有一个CSV文件,其中
的
数据看起来像"John Doe",Washington,100,22,...。带引号
的
值
是包含空格
的
值
。没有引号
的
值
没有空格。数据已由AWS Glue Crawler处理,当AWS
Athena
查询
时,它将返回所有
值
,包括引号。我不希望在
查询
中返回引号。我已经尝试在https://docs.aws.
amazon
.co
浏览 39
提问于2021-09-01
得票数 0
2
回答
AWS DynamoDB到S3每小时备份一次
、
、
我已经经历了几个关于从DDB到S3
的
每小时备份
的
堆栈溢出问题,其中最好
的
解决方案是启用DDB流,订阅λ功能并推送到S3。有人能分享一下如果我们在两者之间引入Firehose
的
好处是什么吗?无论
如何
,我们只在特定
的
批处理窗口之后触发lambda,这意味着我们已经在那里缓冲了。 提前谢谢。
浏览 25
提问于2021-02-04
得票数 0
1
回答
AWS
Athena
CTAS
查询
失败,建议清空空存储桶
、
、
、
我正在运行一个"CREATE TABLE AS SELECT (CTAS) query“(https://docs.aws.
amazon
.com/
athena
/latest/ug/ctas.html),即在底部复制
的
查询
。关于此错误
的
亚马逊网络服务知识中心页面(https://aws.
amazon
.com/premiumsupport/knowledge-center/
浏览 23
提问于2021-05-04
得票数 0
回答已采纳
2
回答
AWS
Amazon
Athena
无法使用布尔型字段对数据进行分区
、
、
、
、
我试图用布尔
值
对
Amazon
Athena
上
的
数据进行分区,但似乎行不通。我
的
数据(
JSON
格式)如下所示: "name": "apple", "color": "red",} "name": "
浏览 0
提问于2020-02-06
得票数 1
1
回答
气流中不同任务间
的
重用参数值
如何
重用在任务之间运行
的
DAG上计算
的
值
?from airflow.utils.dates import days_ago from airflow.providers.
amazon
.aws.operators.
athena
import AWSAthenaOpera
浏览 0
提问于2021-03-08
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
迁移了几十家企业之后,我们总结了如何在云中构建成功的现代数据分析平台
数据湖和SQL并不矛盾
【微服务架构】让我们谈谈“拥有”他们的数据的微服务
JSON中的树状结构数据简介
如何构建智能湖仓架构?亚马逊工程师的代码实践
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券