Databricks Runtime 10。X遷移指南

本指南幫助您將Databricks工作負載遷移到最新版本的Databricks Runtime 10.x。

Databricks建議您將工作負載從最新支持的Databricks Runtime LTS版本遷移到受支持的Databricks Runtime LTS版本。因此,本文主要討論從Databricks Runtime 9.1 LTSDatabricks Runtime 10.4 LTS

若要將工作負載從Databricks Runtime 9.0或以下版本遷移到Databricks Runtime 10.4 LTS,建議您按照以下順序遷移工作負載:

  1. 遷移到Databricks Runtime 9.1 LTS。看到Databricks Runtime 9.1 LTS遷移指南

  2. 按照本文中的指導從Databricks Runtime 9.1 LTS遷移到Databricks Runtime 10.4 LTS。

目前支持的LTS版本為Databricks Runtime 11.3 LTS。從Databricks Runtime 9.1 LTS遷移工作負載到Databricks Runtime 11.3 LTS,請參見Databricks Runtime 11。X遷移指南

Apache Spark遷移指南

Databricks Runtime的最新版本是11.3 LTS,由Apache Spark 3.3.0提供支持。有關Spark特定的遷移信息,請按Databricks Runtime版本單擊以下一個或多個鏈接查看相應的Apache Spark遷移指南。Databricks Runtime 9.1 LTS由Apache Spark 3.1.2提供支持。

Databricks運行時版本號

Apache Spark版本

10.3 - 10.5

3.2.1之上

10.0 - 10.2

3.2.0

9.1 LTS

3.1.2