腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
使用Python从
MySQL
数据库表中读取
SparkSQL
、
、
我在
MySQL
中有一个'user‘表。我想把它读到我的Spark SQL程序中。如何使用Python将表从
MySQL
读取到Apache Spark的
SparkSQL
模块?有没有可以用来完成这个任务的
连接
器?谢谢。
浏览 0
提问于2016-04-25
得票数 12
2
回答
SparkSQL
是关系数据库管理系统还是NOSQL?
、
、
、
、
最近,当我们遇到这个问题时,我正在和我的朋友讨论
SparkSQL
的特性。它们是酸性交易吗?
SparkSQL
是否遵循CAP定理? 我对这个领域有点陌生,帮帮我吧。提前谢谢。
浏览 3
提问于2016-05-10
得票数 3
回答已采纳
1
回答
HBase表上的
SparkSQL
、
、
、
任何人直接在HBase表上使用
SparkSQL
,就像在Hive表上使用
SparkSQL
一样。我是spark.Please新手,指导我如何
连接
hbase和spark.How来查询hbase表。
浏览 22
提问于2016-09-16
得票数 7
回答已采纳
1
回答
相当于
MySQL
在Apache
SparkSQL
中的“杀死查询”?
MySQL
的命令kill query (定义为)是否等同于Apache
SparkSQL
?谢谢!
浏览 2
提问于2017-10-17
得票数 0
回答已采纳
1
回答
相当于
MySQL
在
SparkSQL
中的“显示处理列表”
在
MySQL
的命令show processlist;中有Apache
SparkSQL
的等价物吗?
浏览 3
提问于2017-10-17
得票数 0
回答已采纳
1
回答
如何使用Spark SQL列出数据库中的所有表?
、
、
我有一个到外部数据库的
SparkSQL
连接
: .builder \我使用的是pyspark v2.1,以防有什么不同。
浏览 2
提问于2017-03-19
得票数 11
回答已采纳
1
回答
星星之火-SQL查询提示以提高
连接
性能
、
我最近被介绍给
SparkSQL
。我们使用Spark 2.4。最近,我发现
SparkSQL
查询支持其
连接
策略的以下提示: 有人能用一些例子来解释吗。任何帮助都是非常感谢的。谢谢
浏览 3
提问于2020-06-08
得票数 1
1
回答
JDBC -卡桑德拉火花ie
连接
器可以加入查询工具,例如Tableau/Alteryx/Sqlclient吗?
、
、
、
、
有了
SparkSQL
卡桑德拉
连接
器,JDBC工具(即DBVisualizer、Tableau、Alteryx.etc)可以将2个Cassandra表与
SparkSQL
连接
起来吗?
浏览 0
提问于2018-06-25
得票数 1
回答已采纳
6
回答
Spark Sql JDBC支持
1)我们有来自不同来源(
MySQL
、甲骨文、卡桑德拉、蒙戈)的数据。我们想知道如何将这些数据放入Spark SQL中?有没有我们可以使用的实用程序?3)对于报告UI,我们使用Jasper,我们希望从Jasper
连接
到Spark SQL。当我们进行最初的搜索时,我们了解到目前还不支持消费者通过JDBC
连接
Spark SQL,但在未来的版本中,您会希望添加相同的功能。我们想知道Spark SQL什么时候会有一个支持JDBC的稳定版本?
浏览 0
提问于2014-07-08
得票数 7
1
回答
星火结构流scala +合流模式注册表(json模式)
、
、
我有一个火花结构化流scala作业,它从kafka读取json消息并将数据写入S3。我配置了一个合流模式注册中心,该模式使用type=object的json格式。现在,我可以从注册表中检索模式,但是我需要在包含kafka记录的dataframe上使用这个模式。val valueRestResponseSchema = restService.getLatestVersion(schemaName) // return type is io.confluent.kafka.schemare
浏览 7
提问于2022-11-30
得票数 0
1
回答
Spark SQL 2.1是否支持将临时表或hive表写入
Mysql
/Oracle?
我使用的是Spark SQL 2.1, 我可以在Spark SQL中以临时视图的形式从
mysql
/oracle中读取数据: val url = "jdbc:
mysql
://localhost:3306password '$pass', numPartitions '3') val session = SparkSession.builder().appName("
S
浏览 9
提问于2019-03-29
得票数 0
3
回答
Spark SQL广播哈希
连接
、
我正在尝试使用
SparkSQL
对数据帧执行广播散列联接,如下所示:我遇到的问题是,我需要使用SQL来构造我的
sparkSQL
(我需要用一个ID列表
连接
大约50个表,并且不想手动编写这个SQL语句)。
浏览 7
提问于2016-05-27
得票数 16
回答已采纳
1
回答
如何使用SparkR将
MySQL
数据库
连接
到Apache Spark?
、
、
、
使用SparkR
连接
到
MySQL
或任何其他SQL数据库。 编写SQL查询,如SELECT、UPDATE等来修改数据库中的表。我知道使用R来做这件事,但是我需要一些帮助来使用Spark Sessions或
SparkSQL
context。我正在使用R Studio进行开发。
浏览 4
提问于2016-08-21
得票数 0
2
回答
在
SparkSQL
中执行
SparkSQL
后获取所有行
、
、
我试着在
SparkSQL
中做group by,这很好,但是大多数行都丢失了。227967 ||100004 |227973 |
MySQL
--请注意,,我已经检查了与此相关的其他答案,比如
连接
以获取所有行等等,但是我想知道是否还有其他方法可以得到类似于
MySQL
的结果?
浏览 10
提问于2020-12-02
得票数 0
回答已采纳
2
回答
如何与PySpark、
SparkSQL
和Cassandra合作?
、
、
、
我有点困惑于不同的演员在这个故事: PySpark,
SparkSQL
,卡桑德拉和火星雨-卡桑德拉
连接
器。据我所知,星火已经进化了很多,
SparkSQL
现在是一个关键组件(有了'dataframes')。显然,没有
SparkSQL
是绝对没有理由工作的,特别是如果
连接
到卡桑德拉。因此,我的问题是:需要哪些组件,以及如何以最简单的方式将它们
连接
在一起?.
浏览 7
提问于2016-02-28
得票数 1
1
回答
从外部
连接
到Azure Synapse Spark池
、
是否有可能从“外部”
连接
到Azure Synapse星火池。指的是Rstudio还是
Sparksql
?
浏览 5
提问于2022-01-27
得票数 1
回答已采纳
1
回答
在SparkSession.SQL中执行准备语句和批处理语句
、
、
、
如何使用SparkSession.SQL对Java中的Cassandra执行准备语句和批处理语句?我在使用Spark2.1
浏览 4
提问于2017-01-19
得票数 0
回答已采纳
1
回答
Cassandra逻辑行的
SparkSQL
跨越
、
、
、
、
在这种情况下,我希望使用
SparkSQL
“迭代”或映射“宽行”,而不是逻辑Cassandra行(CQL行)。我如何通过保持数据的局部性(我认为我的数据模型非常适合于这些任务)来有效地使用
SparkSQL
呢? 我阅读了,其中提到了Cassandra
连接
器中的spanBy和spanByKey。这将如何与
SparkSQL
一起使用?
浏览 0
提问于2016-03-13
得票数 0
1
回答
SparkSQL
连接
问题
、
、
我有一个火花作业,它将从CSV文件中的数据加载到
MySQL
数据库中。这将不会为每个插入打开一个
连接
。
浏览 1
提问于2018-07-24
得票数 1
回答已采纳
3
回答
使用spark streaming从数据库读取流
、
、
、
、
我想使用火花流来读取像
mysql
这样的RDBMS数据库中的数据。
浏览 2
提问于2016-06-02
得票数 3
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
MySQL 连接
Jmeter连接Mysql和Mysql编码问题
SparkSQL内核剖析
Python mysql连接池
mysql 使用加密连接ssl
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券