在Databricks中将变量从Scala传递到Python
在Databricks中将变量从Scala传递到Python
提问于 2017-08-25 15:29:50
我正在使用Databricks，并试图在同一个Scala笔记本中将一个数据帧从Scala传递到Python。我使用以下命令从Python向Spark传递了一个数据帧：
%python
python_df.registerTempTable("temp_table")
val scalaDF = table("temp_table")我如何反向做同样的事情呢？非常感谢！
回答 2
Stack Overflow用户
回答已采纳
发布于 2017-08-25 18:22:01
反之亦然。在Scala中：
scalaDF.registerTempTable("some_table")在Python中：
spark.table("some_table")如果你使用最新的Spark版本，你应该用createOrReplaceTempView代替registerTempTable。
Stack Overflow用户
发布于 2020-11-21 13:25:38
您可以使用.createOrReplaceTempView()方法或sql()。
下面是一个示例，将数据帧从scala、python传递到sql，并在...and返回scala的过程中进行修改。
%scala
var df = spark.range(0,10).selectExpr("*","'scala' language_origin")
df.createOrReplaceTempView("tableName")
display(df)
%python
df = sql("select * from tableName")
df2 = df.selectExpr("*","'python' language_added")
df2.createOrReplaceTempView("tableName")
display(df2)
%sql
create or replace temp view tableName as
select *, 'sql' language_added from tableName;
select * from tableName
%scala
df = sql("select * from tableName")
display(df)页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/45884823
复制相关文章
点击加载更多
相似问题
Node + Coffeescript + Zappa
无法安装Zappa的咖啡(MacOSX10.9)
zappa js @include coffeescript方法不工作
Coffeescript编译变体(coffeescript.org与咖啡-rails)
使用coffeescript (zappa)在nodejs / commonjs中重新导出模块(mongoose)
添加站长 进交流群
领取专属 10元无门槛券
AI混元助手 在线答疑
关注 腾讯云开发者公众号
洞察 腾讯核心技术
剖析业界实践案例
腾讯云开发者
