腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
无法
使用
pySpark
从
Presto
SQL
(
Trino
)
获取
数据
、
、
、
、
我有一个在AWS Glue上运行的
pyspark
作业。当我在本地机器上运行代码时,它运行得很好。但是,当我尝试
从
AWS Glue运行相同的代码时,我
无法
获取
数据
。下面是我的代码和错误消息。
从
输出中,您会注意到我能够获得模式信息。只要我尝试
获取
数据
,就会发生错误。 更新:发生此问题是因为工作节点
无法
访问主节点中存在的密钥库。import SQLContext from
pyspark
.
sql
.type
浏览 90
提问于2020-12-31
得票数 1
回答已采纳
1
回答
使用
SSL时,
Presto
无法
访问网页
、
我的
presto
版本是0.240我的操作:我想在
presto
中
使用
ssl来
使用
https,所以我改变了我的配置,只通过这个url:https://
trino
.io/docs/current/security/internal-communication.html,但我不能访问
presto
地址https://192.168.100.142:9999/,我不知道我做错了哪一步。如何为
Presto
浏览 188
提问于2021-01-12
得票数 1
回答已采纳
2
回答
在Java代码中执行查询连接到
Presto
时出错
、
、
我们正在尝试
使用
Java代码连接
Presto
并执行一些查询。我们
使用
的是MySQL目录。 我为
Presto
创建了一个MySQL连接器目录。我成功地
使用
Presto
作为MySQL来查询
浏览 10
提问于2021-02-08
得票数 0
1
回答
如何
使用
预查询找到蜂巢表的last_updated时间?
、
、
、
、
我
使用
trino
-python-client查询hive
数据
库 host="<host>",<table_name>")现在,我想
使用
trino
连接来
获取
蜂窝表的last_updated时间。因此,我尝试运行以下查询,但它们都没有工作。期望:“目录”、“列”、“创建”
浏览 14
提问于2022-07-05
得票数 0
1
回答
使用
HUDI在
TRINO
上创建表的示例
、
、
、
我
使用
Spark Structured Streaming (3.1.1)
从
Kafka读取
数据
,并
使用
HUDI (0.8.0)作为S3上的存储系统,按日期对
数据
进行分区。(本节无问题)我创建了一个具有以下模
浏览 6
提问于2021-12-23
得票数 3
1
回答
用JDBC连接器写
PySpark
到
Trino
、
、
、
、
我试图
使用
带有
PySpark
的JDBC连接器
从
Trino
中的表中读取
数据
,但是,每当我试图编写string / VARCHAR列时,我都会得到错误"Unknown type 'TEXT' for column我
使用
的代码如下:from
pyspark
import SparkContext sc = SparkCont
浏览 42
提问于2022-05-09
得票数 0
回答已采纳
1
回答
使用
不同的参数遍历
SQL
代码(
Presto
)
、
、
我在和
Presto
/
Trino
合作。 我需要多次运行同一个
SQL
查询,但每次都
使用
不同的输入。
SQL
代码由几个链接的CTE组成,它们根据一个日期和周数分析
数据
,因此查询将根据该日期和该日期之前的
数据
周数来分析
数据
。#I might modify this number sometimes { SELECT with several CTEs with
SQL
usin
浏览 34
提问于2021-08-26
得票数 0
2
回答
SQL
查询以查找
数据
库中元素的第二个匹配项
、
例如,我有一张桌子:-------+----------+--------- 109 2 13:56 111 3 14:31 113 2 15:52因此,所需的输出需要(对于个人ID之一): seenID | personID |
浏览 5
提问于2021-09-22
得票数 0
回答已采纳
1
回答
pyspark
代码或步骤,以连接到
Presto
SQL
目录和执行查询的postgresql db
使用
?
、
、
、
、
我已经配置了火花放电,可以直接
使用
PostgreSQL。但是,我希望
使用
jdbc连接器将
数据
从
spark传递到
presto
,然后
使用
pyspark
和
presto
在postgresql上运行查询。from
pyspark
.
sql
import SparkSessionfrom
pyspark
.<e
浏览 4
提问于2019-04-15
得票数 1
1
回答
Presto
显示表显示不存在的表,这是由于mysqldb的大小写敏感性造成的。
、
、
为了这个问题的目的,我指的是prestosql.io或
Trino
之后的品牌重组。我这里有张桌子(细节修改): Table foo ...它生活在mysql
数据
库中。我有一个
presto
目录a,它有一个mysqldb连接器来查询来自
presto
的
数据
。看到是如何实现的,在我看来,连接器似乎
从
Presto
传入了一个无效的表名,因此我
无法<
浏览 1
提问于2021-01-07
得票数 0
回答已采纳
1
回答
使用
Presto
“查询
数据
所在位置”是什么意思?
、
我在一个
Presto
教程上看到了这一点,它的好处是“查询
数据
所在的位置”。编辑:通过链接到主页上的报价添加上下文 “它能做什么?”
浏览 26
提问于2021-05-19
得票数 2
回答已采纳
1
回答
如何
使用
Trino
读取位于s3上的拼花文件?
我是S3和
Trino
的初学者(
Presto
)。我有:安装在现场
使用
码头的
Trino
(
Presto
)。S3桶,定位文件与拼花文件扩展。我安装Apache-钻,在盒子里他有s3 conector。我要在
Trino
(
Presto
)中这样做,但我没有结果(有错误)。我怎么能在
Trino
(
Presto
)里做同样的事? P.s.
浏览 9
提问于2022-06-27
得票数 1
回答已采纳
2
回答
为什么AWS Athena在目标S3位置转储结果时需要'spill-bucket‘
、
、
、
AS SELECT *既然雅典娜已经有了存储
数据
的存储桶
浏览 0
提问于2021-02-24
得票数 2
1
回答
PySpark
& JDBC:我什么时候应该在JDBC中
使用
should?
、
、
、
我有一个HDFS
数据
湖,可以通过Hive和
Presto
、Impala和Spark (集群中的)查询
数据
。可以在本地安装(例如,我的笔记本电脑),可以
使用
JDBC连接
数据
源(Hive或
Presto
),就像在中一样?因此,我可以
使用
PySpark
的dataframe语法和Python来查询
数据</em
浏览 3
提问于2019-10-21
得票数 1
回答已采纳
1
回答
只
从
自动更新的联机
sql
数据
库中
获取
新
数据
。
、
我有一个在线的MySQL (
presto
)
数据
库,它不断地自动更新(也就是说,新的行每天都会被添加到表中(确切地说,是视图)。我希望每天
从
它中
获取
数据
,但不想重新
获取
我以前已经
获取
的
数据
。我
使用
python3
从
在线主机
数据
库中提取
数据
,如下所示:import numpy as np cursor=
pre
浏览 0
提问于2018-06-05
得票数 2
回答已采纳
2
回答
Presto
生成JSON结果
、
、
、
TABLE `normaldata_source`( `column2` string, `column3` struct<column4:string>) 示例
数据
如下
浏览 148
提问于2020-12-27
得票数 4
1
回答
将表描述添加到火花放电的冰山表中
、
、
、
、
使用
以下
trino
命令,我能够
使用
trino
向冰山表添加表注释:此外,还可以
使用
以下方法
从
火花放电中读取:我
无法
找到一种方法来将这些注释插入到表中
使
浏览 7
提问于2022-02-26
得票数 1
1
回答
Presto
无法
从
S3导入拼图文件
、
、
、
我有一个根据分区
从
s3导入拼图文件的
presto
表,如下所示: create table hive.data.datadump tUnixEpoch varchar, tDateTimeexternal_location = 's3a://dev/files'); 存储地块文件的S3文件夹结构如下所示: s3a://dev/files/series=S5/sno=242=/date=2020-1-23 并且分区
从</em
浏览 10
提问于2020-01-24
得票数 2
1
回答
带弹性的
Trino
/
presto
:如何搜索嵌套对象?
、
、
、
我对
trino
很陌生,我试图用它来查询弹性搜索中嵌套的对象。
trino
中对id字段执行查询的语法是什么?是否需要
使用
弹性目标索引映射的特殊定义来映射
trino
的嵌套部分?我们试图根据id字段查询
数据
。发送es-查询
从
trino
到弹性: SELECT *
从
es.default。“$query:”它可以工作,但当我们试图检索id与许多文档,我们
从
弹性客户端超时。
从
文档中我
无法
理解,当我们
使用</
浏览 7
提问于2021-05-24
得票数 1
1
回答
使用
Presto
设置EMR中JDBC连接的基本密码身份验证
、
、
我
使用
AWS
数据
目录作为元存储,通过CDK运行
Presto
部署了一个EMR集群。集群将只具有运行查询的默认用户。默认情况下,主用户是hadoop,我可以
使用
它通过JDBC连接到集群并运行查询。我已经阅读了
Presto
文档,它们提到了LDAP、Kerberos和基于文件的身份验证。我只想让它表现得像,比方说,一个MySQL
数据
库,在这里,我必须同时传递用户名和密码才能连接。这要求您获得有效的证书,并将其添加到
Trino
协调员的配置中。” 我已经
从
我的公司
浏览 27
提问于2022-06-28
得票数 1
点击加载更多
相关
资讯
【大数据】Presto(Trino)SQL 语法进阶
【大数据】Presto(Trino)配置参数以及 SQL语法
【大数据】Presto(Trino)REST API 与执行计划介绍
【云原生】Presto/Trino on k8s 环境部署
计算中间件 Apache Linkis 正式毕业成为 Apache 顶级项目
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
活动推荐
运营活动
广告
关闭
领券