Azure Synapse Runtime para Apache Spark 3.2 (preterido)
O Azure Synapse Analytics dá suporte a vários tempos de execução para o Apache Spark. Este documento aborda os componentes e versões de tempo de execução para o Azure Synapse Runtime for Apache Spark 3.2.
Atenção
Notificação de desativação e desativação do Azure Synapse Runtime for Apache Spark 3.2
- O fim do suporte foi anunciado para o Azure Synapse Runtime for Apache Spark 3.2 em 8 de julho de 2023. De acordo com a política de ciclo de vida do tempo de execução do Synapse para Apache Spark, o tempo de execução do Azure Synapse para Apache Spark 3.2 foi desativado em 8 de julho de 2024. Os fluxos de trabalho existentes continuarão a ser executados, mas as atualizações de segurança e correções de bugs não estarão mais disponíveis. Os metadados permanecerão temporariamente no espaço de trabalho Sinapse.
- A partir de 8 de julho de 2024, o Azure Synapse descontinuou o suporte oficial para o Spark 3.2 Runtimes. No entanto, com base em solicitações recebidas de vários clientes, estendemos o uso desse tempo de execução até 31 de outubro de 2024, e a desativação do trabalho começará logo em seguida.
- É altamente recomendável que você atualize suas cargas de trabalho do Apache Spark 3.2 para o Azure Synapse Runtime for Apache Spark 3.4.
- Para obter informações atualizadas, uma lista detalhada de alterações e notas de versão específicas para tempos de execução do Spark, verifique e assine as versões e atualizações do Spark Runtimes.
Versões de componentes
| Componente | Versão |
|---|---|
| Apache Spark | 3.2.1 |
| Sistema operativo | Ubuntu 18.04 |
| Java | 1.8.0_282 |
| Scala | 2.12.15 |
| Hadoop | 3.3.1 |
| .NET Core | 3.1 |
| .NET | 2.0.0 |
| Delta Lake | 1.2 |
| Python | 3,8 |
| R (Pré-visualização) | 4.2 |
Synapse-Python38-CPU.yml contém a lista de bibliotecas fornecidas no ambiente Python 3.8 padrão no Azure Synapse Spark.
Bibliotecas
Para verificar as bibliotecas incluídas no Azure Synapse Runtime for Apache Spark 3.2 for Java/Scala, Python e R, vá para Azure Synapse Runtime for Apache Spark 3.2 Release Notes
Próximos passos
Migração entre versões do Apache Spark - suporte
Para obter orientação sobre como migrar de versões de tempo de execução mais antigas para o Azure Synapse Runtime for Apache Spark 3.3 ou 3.4, consulte Visão geral do Runtime for Apache Spark.