在Databricks中将变量从Scala传递到Python

本教程将介绍在Databricks中将变量从Scala传递到Python的处理方法,这篇教程是从别的地方看到的,然后加了一些国外程序员的疑问与解答,希望能对你有所帮助,好了,下面开始学习吧。

问题描述

我正在使用Databricks,并试图在同一个Scala笔记本中将一个数据帧从Scala传递到Python。我使用以下命令将数据帧从Python传递给Spark:

%python
python_df.registerTempTable("temp_table")


val scalaDF = table("temp_table")

怎么反向执行相同的操作?非常感谢!!

推荐答案

反之亦然。在Scala中:

scalaDF.registerTempTable("some_table")

在Python中:

spark.table("some_table")

如果使用最新版本的Spark,则应使用createOrReplaceTempView代替registerTempTable

好了关于在Databricks中将变量从Scala传递到Python的教程就到这里就结束了,希望趣模板源码网找到的这篇技术文章能帮助到大家,更多技术教程可以在站内搜索。

0
没有账号?注册  忘记密码?