Поделиться через

Delta живые таблицы версия 2023.43

  • Статья

30 октября – 3 ноября 2023 г.

Эти функции и улучшения были выпущены в выпуске Delta Live Tables 2023.43.

Заметка

Выпуски проводятся поэтапно. Ваш выпуск Delta Live Tables, включая версии среды выполнения Databricks, может не обновляться в течение недели или более после начальной даты выпуска.

Версии среды выполнения Databricks, используемые этим выпуском

канал :

  • CURRENT (по умолчанию): Databricks Runtime 12.2.15
  • ПРЕДВАРИТЕЛЬНАЯ ВЕРСИЯ: Databricks Runtime 13.3.4

Новые функции и улучшения в этом выпуске

  • При просмотре потока данных в пользовательском интерфейсе Delta Live Tables теперь можно просматривать наборы данных потока в табличном представлении помимо графического отображения. Табличное представление можно использовать для обзора всех наборов данных в конвейере, особенно если DAG слишком велик, чтобы поместиться в представление графа. Вы также можете найти определенные наборы данных с помощью фильтров, таких как имя и тип набора данных. См. Какие сведения о конвейере доступны в пользовательском интерфейсе?.

  • Теперь в этом обновлении вы увидите предупреждение, если не используете ключевое слово LIVE при ссылке на таблицу в том же конвейере.

  • Теперь вы можете записывать в потоковую таблицу из нескольких исходящих потоков, что позволяет добавлять и удалять источники, дополняющие данные в существующую потоковую таблицу, без необходимости полного обновления, и заполнять таблицу отсутствующими историческими данными. См. раздел Использование потока добавления для записи в потоковую таблицу из нескольких исходных потоков.

  • Теперь вы можете добавить скрипт allowlisted init в кластер, на котором выполняется конвейер с поддержкой каталога Unity.