腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
2
回答
在
SparkSQL
中
拆分
字符串
、
Code 554asdf.ttp.net Part 554我想要创建一条
SparkSQL
语句,仅
拆分
表的a列,并希望
在
表D
中
添加一个新行,其值为awe、abcd、asdf和xyz。
浏览 57
提问于2017-06-22
得票数 0
1
回答
SparkSQL
拆分
字符串
、
Code 554asdf.ttp.net Part 554我想要创建一条
SparkSQL
语句,仅
拆分
表的a列,并希望
在
表D
中
添加一个新行,其值为awe、abcd、asdf和xyz。
浏览 1
提问于2017-06-23
得票数 0
1
回答
Spark Scala
拆分
字符串
语法问题
、
我尝试使用
SparkSQL
和Scala
拆分
DataFrame列
中
的
字符串
,这两种
拆分
条件的工作方式似乎有所不同 使用Scala, 这是可行的- val seq = Seq("12.1")afterSplit.show(fals
浏览 18
提问于2019-01-08
得票数 0
回答已采纳
1
回答
如何在spark中将json array<String>转换为csv
、
、
、
我尝试过这个查询,希望从linkedin的数据
中
获得所需的经验。 + " a where lower(exp) like '%developer%'"); 请给我提示,如何在同一列中将
字符串
数组转换为逗号分隔的
字符串
浏览 6
提问于2016-09-22
得票数 1
回答已采纳
4
回答
从()函数
中
获取最后一个元素
我希望从()函数返回的Array
中
获得最后一个元素。
浏览 8
提问于2017-01-26
得票数 8
回答已采纳
1
回答
星火结构流scala +合流模式注册表(json模式)
、
、
现在,我可以从注册表
中
检索模式,但是我需要在包含kafka记录的dataframe上使用这个模式。如何将valueRestResponseSchema转换为结构化类型,以便能够
在
from_json
中
应用?val值: DataFrame =df.selectExpr(“强制转换为
字符串
)作为数据”).select(from_json(“数据”),valueRestResponseSchema).as(“数据
浏览 7
提问于2022-11-30
得票数 0
2
回答
仅使用spark sql删除表/视图中的列
、
、
我
在
一个表中有30列,即table_old drop_column=now_current_column var table_new=spark.sql(s"""alter table table_oldI要求仅使用
sparksql
删除表
中
的列
浏览 7
提问于2018-11-01
得票数 3
4
回答
Spark sql
中
的变量
、
、
因为
在
SQL Server
中
,我们可以像declare @
sparksql
='<any query/value/string>'一样声明变量,但是
在
spark sql
中
可以使用什么替代方法。这样我们就不需要硬编码任何值/查询/
字符串
。
浏览 541
提问于2020-11-26
得票数 3
1
回答
无法将SparkR::sampleBy函数应用于sparklyr数据SparkR
、
、
、
mtable):无法为函数‘sampleBy’找到用于签名‘“tbl_spark”、“字符”、“列表”、“数字”的继承方法 有没有一种方法可以将一个tbl_spark转换成一个火花数据,这样我就可以
在
它上使用
浏览 0
提问于2019-09-03
得票数 1
回答已采纳
1
回答
SparkSQL
2.4.0
中
regexp_extract_all的替代方案
、
有办法
在
SparkSQL
2.4.0
中
执行regexp_extract_all吗?|Column |如何在<e
浏览 4
提问于2022-08-10
得票数 1
2
回答
查找
字符串
中
字符的索引位置,并在dataframe
中
的子
字符串
函数中使用该索引位置
、
、
、
数据框架:我需要根据#位置截断
字符串
列的值。其结果应该是:我正在尝试这段代码,但它正在抛出一个TypeError:虽然我可以使用
SparkSql
或通过
在
Python
中
创建函数来达到预期的结果,但在pyspark本身
中
是否可以这样做呢
浏览 4
提问于2022-08-23
得票数 0
回答已采纳
1
回答
SparkSQL
中
不带聚合函数的GROUP BY
、
、
我正在尝试
在
SparkSQL
中
重现与sql
中
的group by相同的行为。下面是一个使用SQL而不是使用
SparkSQL
函数
在
SparkSQL
中所能完成的操作的示例: 输入数据集: val input = Seq( ("Toronto----+-----+|Toronto|2016|4 |+----
浏览 26
提问于2021-08-30
得票数 0
回答已采纳
2
回答
为什么
在
星火上使用Hive而不是Spark?
、
、
、
在
星火上使用Hive而不是Spark有什么好处(除了能够在生产中使用Hive代码之外)? 谢谢
浏览 5
提问于2015-05-12
得票数 2
回答已采纳
1
回答
使用几个GBs大小的数据集的
sparksql
、
、
我的一些查询使用join命令如果我有多台服务器要运行,那么使用
sparkSQL
可以获得更好的性能吗?是否适合使用
sparkSQL
或postgresSQL ?的数据集? 什么时候选择
sparkSQL
而不是postgresSQL ?
浏览 2
提问于2021-01-04
得票数 1
回答已采纳
1
回答
com.amazonaws.services.glue.writeDynamicFrame?的SparkQL选项是什么?
、
在
本文档
中
:然而,我如何才能找到这些选择呢?
浏览 0
提问于2018-06-29
得票数 0
回答已采纳
1
回答
使用spark-sql或pyspark模式
在
列之间匹配的转换
、
、
、
我有一个问题声明,所有的列类型都是
字符串
? 列A模式如果它与列C
中
的模式匹配,则用1更新好的东西,否则(-) pyspark、
sparksql
中
的任何查询 感谢Anuj Gupta
浏览 8
提问于2021-11-09
得票数 0
回答已采纳
1
回答
星火中的转移矿是用来做什么的?
、
、
、
我
在
python中使用
SparkSQL
。我已经创建了一个分区表(大约几百个分区),并使用hiveContext将其存储到Hive内部表
中
。母公司仓库位于S3。
浏览 2
提问于2015-06-22
得票数 4
1
回答
Shell:当数据为整数/双时,SQL查询不返回任何结果
、
、
、
在
进入实际问题之前,我将描述整个过程,以防我做错了什么,因为这是我第一次使用这些工具。: 651.21Total Revenue: 583484.16Total Profit: 113120spark.sql("SELECT * FROM sales").show()spark.sql("SELECT Country FROM sales
浏览 4
提问于2021-12-16
得票数 1
回答已采纳
2
回答
通过JDBC访问Azure HDInsights
中
的Spark
、
、
、
、
我可以使用Azure
中
的HDInsight集群的以下URL从外部连接到hive。jdbc:hive2://<host>:443/default;transportMode=http;ssl=true;httpPath=/ 但是,我找不到spark这样的
字符串
。如何通过JDBC连接集群运行
SparkSQL
查询?
浏览 2
提问于2018-03-29
得票数 1
2
回答
是否可以
在
Apache中加载和查询除HBASE之外的结构化数据?
、
因此,我使用Pig XMLloader将两个表示顶点和边缘数据的XML文件加载到Hadoop/HDFS
中
,并从中创建了Hive表。然而,
在
SparkSQL
中
,Hive被支持作为结构化数据的来源。
SparkSQL
中
也支持JSON结构化数据。
在
SparkSQL
中
对Hive的支持是否也意味着使用HiveContext的Hive
在
SparkSQL
中
是本地支持的?
浏览 3
提问于2015-01-16
得票数 1
回答已采纳
点击加载更多
热门
标签
更多标签
云服务器
ICP备案
对象存储
云点播
实时音视频
活动推荐
运营活动
广告
关闭
领券