Поделиться через

Delta Live Tables версия 2023.11

  • Статья

20 марта – 24 марта 2023 г.

Эти функции и улучшения были выпущены в выпуске Delta Live Tables 2023.11.

Версии среды выполнения Databricks, используемые этим выпуском

Канал:

  • CURRENT (по умолчанию): Databricks Runtime 11.3.6
  • PREVIEW: Databricks Runtime 12.1.2

Новые функции и улучшения в этом выпуске

  • Теперь вы можете получать статус в реальном времени обновлений вашего конвейера через уведомления по электронной почте. Вы можете настроить один или несколько адресов электронной почты для получения уведомлений, когда:

    • Обновление конвейера завершается успешно, завершается ошибкой повторной попытки или завершается ошибкой без повторных попыток.
    • Сбой одного потока данных.

    Чтобы настроить сообщения электронной почты уведомлений, щелкните уведомления в параметрах конвейера при создании или изменении конвейера. Дополнительные сведения о событиях конвейера см. в разделе "Добавление Уведомления по электронной почте".

  • Этот выпуск включает изменения для улучшения пользовательского опыта при просмотре списка конвейеров в интерфейсе Delta Live Tables. Изменения включают увеличение количества конвейеров, отображаемых на каждой странице. По умолчанию на каждой странице отображаются 20 конвейеров. Предыдущее значение по умолчанию — отображение 10 конвейеров на каждой странице.

  • В этом выпуске вы увидите предупреждения о прекращении поддержки в журнале событий Delta Live Tables, если какие-либо из определений набора данных Python содержат обратные кавычки, содержащие имя набора данных, например, определение таблицы как dlt.table(name="`table.name`").

Исправления ошибок в этом выпуске

  • Этот выпуск исправляет ошибку, вызывающую ошибку при использовании spark.sql("SHOW CATALOGS") команды. SHOW CATALOGS теперь поддерживается команда.