Apache Spark 3.2 の Azure Synapse ランタイム (非推奨)

Azure Synapse Analytics は、Apache Spark の複数のランタイムをサポートしています。このドキュメントでは、Azure Synapse Runtime for Apache Spark 3.2 のランタイムコンポーネントとバージョンについて説明します。

注意事項

Apache Spark 3.2 用 Azure Synapse Runtime の非推奨と無効化の通知

2023 年 7 月 8 日、Apache Spark 3.2 用 Azure Synapse Runtime のサポート終了が発表されました。 Apache Spark ライフサイクルポリシーの Synapse ランタイムに従い、Apache Spark 3.2 用 Azure Synapse ランタイムは 2024 年 7 月 8 日をもって廃止されました。既存のワークフローは引き続き実行されますが、セキュリティ更新プログラムとバグ修正プログラムは使用できなくなります。メタデータは一時的に Synapse ワークスペースに残ります。
2024 年 7 月 8 日より、Azure Synapse は Spark 3.2 ランタイムの公式サポートを廃止しました。ただし、複数のお客様から受け取った要求に基づいて、2024 年 10 月 31 日 31 日、 および job 無効化 はその後すぐに開始されるまで、このランタイムの使用を拡張しました。
Apache Spark 3.2 ワークロードを Azure Synapse Runtime for Apache Spark 3.4 にアップグレードすることを強くお勧めします。
最新の情報、変更の詳細な一覧、Spark ランタイムの特定のリリースノートについては、 Spark ランタイムのリリースと更新プログラムを確認してサブスクライブします。

コンポーネントのバージョン

Synapse-Python38-CPU.yml には、Azure Synapse Spark の既定の Python 3.8 環境に付属しているライブラリの一覧が含まれています。

Azure Synapse Runtime for Apache Spark 3.2 for Java/Scala、Python、R に含まれるライブラリを確認するには、 Azure Synapse Runtime for Apache Spark 3.2 リリースノートに移動してください

古いランタイムバージョンから Azure Synapse Runtime for Apache Spark 3.3 または 3.4 への移行のガイダンスについては、「 Runtime for Apache Spark の概要を参照してください。