本教程将介绍在Databricks中将变量从Scala传递到Python的处理方法,这篇教程是从别的地方看到的,然后加了一些国外程序员的疑问与解答,希望能对你有所帮助,好了,下面开始学习吧。
问题描述
我正在使用Databricks,并试图在同一个Scala笔记本中将一个数据帧从Scala传递到Python。我使用以下命令将数据帧从Python传递给Spark:
%python
python_df.registerTempTable("temp_table")
val scalaDF = table("temp_table")
怎么反向执行相同的操作?非常感谢!!
推荐答案
反之亦然。在Scala中:
scalaDF.registerTempTable("some_table")
在Python中:
spark.table("some_table")
如果使用最新版本的Spark,则应使用createOrReplaceTempView
代替registerTempTable
。
好了关于在Databricks中将变量从Scala传递到Python的教程就到这里就结束了,希望趣模板源码网找到的这篇技术文章能帮助到大家,更多技术教程可以在站内搜索。