Databricks Runtime 14.x の移行ガイド
このガイドは、Azure Databricks のワークロードを最新バージョンの Databricks Runtime 14.x に移行するのに役立ちます。 これを行うために、Databricks では、次の順番でワークロードを移行することが推奨されています。
- 現在、ワークロードが Databricks Runtime 13.3 LTS 以降で実行されている場合、この記事で後述するように、最新バージョンの Databricks Runtime 14.x に直接移行できます。
- 現在、ワークロードが Databricks Runtime 13.3 LTS 以下で実行されている場合、次の操作を行います。
- 最初に Databricks Runtime 13.3 LTS に移行します。 「Databricks Runtime 13.x の移行ガイド」を参照してください。
- この記事のガイダンスに従い、Databricks Runtime 13.3 LTS から最新バージョンの Databricks Runtime 14.x に移行します。
Note
LTS は、このバージョンが長期的にサポートされていることを意味します。 Databricks Runtime LTS バージョンのライフサイクルに関する説明を参照してください。
Apache Spark の移行ガイダンス
Databricks Runtime の最新バージョンは、Apache Spark 3.5.0 を利用する 14.3 LTS です。 Spark 固有の移行情報については、Databricks Runtime バージョン別の次のリンクの 1 つ以上をクリックして、対応する Apache Spark 移行ガイドを表示します。 参考までに、Databricks Runtime 13.3 LTS は、Apache Spark 3.4.1 を利用しています。
Databricks Runtime のバージョン | Apache Spark のバージョン |
---|---|
14.0 | 3.5.0 |
14.1 | 3.5.0 |
14.2 | 3.5.0 |
14.3 LTS | 3.5.0 |
Databricks Runtime の動作の変更
次の各 DBR 14.x リリースでは、重要な動作の変更が行われました。これらの変更を以下に示します。
Databricks Runtime システム環境のプロパティ、機能、ライブラリ
Databricks Runtime 13.3 LTS から最新バージョンの Databricks Runtime 14.x までの Databricks Runtime リリースのシステム環境プロパティ、および機能とライブラリの新規追加、変更、非推奨については、次を参照してください。
- Databricks Runtime 14.3 LTS for Machine Learning
- Databricks Runtime 14.3 LTS
- Databricks Runtime 14.2 for Machine Learning
- Databricks Runtime 14.2
- Databricks Runtime 14.1 for Machine Learning
- Databricks Runtime 14.1
- Databricks Runtime 14.0 for Machine Learning (サポート期間終了)
- Databricks Runtime 14.0 (サポート期間終了)
- Databricks Runtime 13.3 LTS for Machine Learning
- Databricks Runtime 13.3 LTS
リリース後のメンテナンス更新プログラムは、「Databricks ランタイム メンテナンス更新プログラム」に記載されています。