Pass variables from Scala to Python in Databricks(在Databricks中将变量从Scala传递到Python)
本文介绍了在Databricks中将变量从Scala传递到Python的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!
问题描述
我正在使用Databricks,并试图在同一个Scala笔记本中将一个数据帧从Scala传递到Python。我使用以下命令将数据帧从Python传递给Spark:
%python
python_df.registerTempTable("temp_table")
val scalaDF = table("temp_table")
如何反向执行相同的操作?非常感谢!!
推荐答案
反之亦然。在Scala中:
scalaDF.registerTempTable("some_table")
在Python中:
spark.table("some_table")
如果使用最新版本的Spark,则应使用createOrReplaceTempView
代替registerTempTable
。
这篇关于在Databricks中将变量从Scala传递到Python的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持编程学习网!
沃梦达教程
本文标题为:在Databricks中将变量从Scala传递到Python


猜你喜欢
- 如何使用PYSPARK从Spark获得批次行 2022-01-01
- 使用公司代理使Python3.x Slack(松弛客户端) 2022-01-01
- 我如何透明地重定向一个Python导入? 2022-01-01
- ";find_element_by_name(';name';)";和&QOOT;FIND_ELEMENT(BY NAME,';NAME';)";之间有什么区别? 2022-01-01
- 计算测试数量的Python单元测试 2022-01-01
- YouTube API v3 返回截断的观看记录 2022-01-01
- 检查具有纬度和经度的地理点是否在 shapefile 中 2022-01-01
- 我如何卸载 PyTorch? 2022-01-01
- CTR 中的 AES 如何用于 Python 和 PyCrypto? 2022-01-01
- 使用 Cython 将 Python 链接到共享库 2022-01-01