Delta Live Tables versão 2023.11

20 a 24 de março de 2023

Esses recursos e melhorias foram lançados com a versão 2023.11 do Delta Live Tables.

Versões do Databricks Runtime usadas por esta versão

Canal:

Agora você pode obter o status em tempo real das atualizações do seu pipeline com notificações por email. Você pode configurar um ou mais endereços de email para receber notificações quando:
- As atualizações de pipeline são concluídas com sucesso, falham com um erro repetível ou falham com um erro não repetível.
- Um único fluxo de dados falhar.
Para configurar emails de notificação, clique em Notificações nas configurações do pipeline ao criar ou editar um pipeline. Confira Adicionar notificações por email para eventos de pipeline.
Essa versão inclui alterações para aprimorar a experiência do usuário ao visualizar a lista de pipelines na UI do Delta Live Tables. As alterações incluem um aumento no número de pipelines exibidos em cada página. Por padrão, 20 pipelines são exibidos em cada página. O padrão anterior era exibir 10 pipelines em cada página.
Com essa versão, você verá avisos de descontinuação no log de eventos Delta Live Tables se alguma das definições do conjunto de dados Python incluir crases envolvendo o nome do conjunto de dados, por exemplo, definindo uma tabela comodlt.table(name="`table.name`").

Essa versão corrige um bug que causava um erro ao usar o comando spark.sql("SHOW CATALOGS"). SHOW CATALOGS agora é um comando com suporte.