Abril de 2022
Esses recursos e melhorias na plataforma Azure Databricks foram lançados em abril de 2022.
Nota
Os lançamentos são encenados. Sua conta do Azure Databricks pode não ser atualizada até uma semana ou mais após a data de lançamento inicial.
Nova região do Azure: Suécia Central
29 de abril de 2021
Azure Databricks agora está disponível na região Suécia Central.
Usar tags para gerenciar melhor seus trabalhos do Azure Databricks
21 a 26 de abril de 2022
Agora você pode adicionar tags aos seus trabalhos do Azure Databricks, permitindo que você rastreie e pesquise facilmente trabalhos com base em uma ou mais chaves personalizadas ou pares chave-valor. Como as tags também se propagam para clusters de trabalho, você pode usá-las com o monitoramento de cluster.
Termina o suporte da série Databricks Runtime 10.0
20 de abril de 2022
O suporte para Databricks Runtime 10.0 e Databricks Runtime 10.0 para Machine Learning terminou em 20 de abril. Consulte Ciclos de vida de suporte do Databricks.
Obtenha uma visão geral visual das execuções do seu trabalho com a nova visualização da matriz de trabalhos
19 a 27 de abril de 2022
Agora você pode visualizar facilmente execuções de um trabalho do Azure Databricks com a nova exibição de matriz na interface do usuário de trabalhos. O modo de exibição de matriz complementa o modo de exibição de tabela existente e fornece uma visão geral dos detalhes da execução do trabalho e da tarefa, incluindo a hora de início, a duração e o status de cada execução. Consulte Exibir execuções para um trabalho.
Economize tempo e recursos quando a execução do trabalho do Azure Databricks não for bem-sucedida
19 a 25 de abril de 2022
Quando uma execução de trabalho falha, o recurso de reparo e reexecução de novos trabalhos permite que você execute novamente apenas o subconjunto de tarefas malsucedidas e quaisquer tarefas dependentes. Como as tarefas bem-sucedidas não são executadas novamente, esse recurso reduz o tempo e os recursos necessários para recuperar de execuções de trabalho malsucedidas. Consulte Executar novamente tarefas com falha e ignoradas.
Exibir o histórico de execução de tarefas de trabalho
19 a 25 de abril de 2022
Agora você pode exibir o histórico de execução de cada tarefa que faz parte de um trabalho que orquestra várias tarefas. Consulte Ver histórico de execução de tarefas.
Atribuir um novo cluster na interface do usuário de trabalhos quando o acesso de usuário único não existir mais
18 a 25 de abril de 2022: Versão 3.70
Esta versão corrige um problema que removeu o botão Trocar cluster da interface do usuário de trabalhos do Azure Databricks quando o acesso de Usuário Único não está disponível. Agora você pode atribuir um novo cluster a um trabalho na interface do usuário quando o cluster configurado não estiver disponível, por exemplo, devido a uma alteração de rede.
Databricks Runtime 10.5 (Beta)
15 de abril de 2022
Databricks Runtime 10.5, 10.5 Photon e 10.5 ML estão agora disponíveis como versões Beta.
Veja as notas de versão completas em Databricks Runtime 10.5 (EoS) e Databricks Runtime 10.5 for Machine Learning (EoS).
A interface do usuário do Delta Live Tables foi aprimorada para desabilitar ações não autorizadas
4 a 11 de abril de 2022: Versão 3.69
A interface do usuário Delta Live Tables é atualizada para desabilitar ações de pipeline que você não está autorizado a usar. Por exemplo, se você tiver apenas CAN_VIEW
permissão, os botões iniciar, parar e excluir serão desativados. Anteriormente, a seleção de uma ação não autorizada resultava na falha da ação.
O AutoML está disponível em geral
4 a 11 de abril de 2022: Versão 3.69
O AutoML está geralmente disponível no Databricks Runtime 10.4 LTS ML e superior.
Usar conjuntos de dados do Unity Catalog com AutoML
4 a 11 de abril de 2022: Versão 3.69
Agora você pode selecionar conjuntos de dados do Catálogo Unity na interface do usuário do AutoML. Você deve ser o usuário único designado de um cluster no modo de acesso de usuário único.
O Delta Live Tables é GA na AWS e no Azure, e no Public Preview no GCP
5 de abril de 2022
A Databricks tem o prazer de anunciar a disponibilidade geral do Delta Live Tables na AWS e no Microsoft Azure e do Public Preview no Google Cloud. Delta Live Tables é a primeira estrutura ETL que usa uma abordagem simples e declarativa para construir pipelines de dados confiáveis. O Delta Live Tables gerencia automaticamente sua infraestrutura em escala para que analistas e engenheiros de dados possam gastar menos tempo em ferramentas e se concentrar em obter valor dos dados. Consulte O que é Delta Live Tables?.
Interface SQL do Delta Live Tables: alteração ininterrupta nos nomes das tabelas
5 de abril de 2022
Esta versão introduz uma alteração ininterrupta na sintaxe usada para nomear tabelas na interface SQL do Delta Live Tables. Essas alterações alinham a semântica e a sintaxe da interface SQL com os próximos aprimoramentos da plataforma Delta Live Tables. Para dar suporte a esses aprimoramentos futuros, estamos fazendo as seguintes alterações:
- As tabelas ao vivo incrementais são renomeadas para streaming de tabelas ao vivo. A transmissão de tabelas ao vivo herda a semântica das tabelas ao vivo incrementais. Delta Live Tables continuará a oferecer suporte
INCREMENTAL
como uma palavra-chave preterida para compatibilidade com versões anteriores. - As mesas ao vivo completas serão referidas como simplesmente mesas ao vivo. As tabelas dinâmicas garantirão que, no final de uma atualização de pipeline, o conteúdo da tabela resultante seja exatamente igual ao resultado da transformação especificada nas entradas atuais.