Апрель 2022 г.
Эти функции и доработки платформы Azure Databricks были выпущены в апреле 2022 г.
Примечание.
Выпуски являются поэтапными. Ваша учетная запись Azure Databricks может быть обновлена только через неделю или более после первоначальной даты выпуска.
Новый регион Azure: Центральная Швеция
29 апреля 2021 г.
Платформа Azure Databricks теперь доступна в регионе "Центральная Швеция".
Использование тегов для улучшения управления заданиями Azure Databricks
21-26 апреля 2022 г.
Теперь вы можете добавлять теги к заданиям Azure Databricks, чтобы легко отслеживать и находить задания по одному или нескольким значениям пользовательских ключей или пар "ключ — значение". Поскольку теги передаются в кластеры заданий, вы можете применять их в средствах мониторинга для кластера.
Databricks Runtime 10.0 — прекращение поддержки
20 апреля 2022 г.
Поддержка Databricks Runtime 10.0 и Databricks Runtime 10.0 для Машинного обучения прекращена 20-го апреля. См. статью "Жизненные циклы поддержки Databricks".
Получение визуального представления выполнения заданий с помощью нового матричного представления заданий
19–27 апреля, 2022 г.
Теперь вы можете легко визуализировать запуски задания Azure Databricks с новым представлением матрицы в пользовательском интерфейсе заданий. Матричное представление дополняет существующее табличное представление и предоставляет общие сведения о задании и выполнении задач, включая время начала, длительность и состояние каждого запуска. См. просмотр запусков для одного задания.
Экономия времени и ресурсов при неудачном выполнении задания Azure Databricks
19–25 апреля, 2022 г.
Если выполнение задания завершается сбоем, новая функция восстановления и повторного запуска позволяет повторно запускать только подмножество неудачных задач и любых зависимых задач. Поскольку выполненные задачи повторно не выполняются, эта возможность сокращает время и ресурсы, которые необходимы для восстановления после неудачного выполнения задания. См. статью "Повторное выполнение неудачных и пропущенных задач".
Просмотр журнала выполнения для задач задания
19–25 апреля, 2022 г.
Теперь можно просмотреть журнал выполнения для каждой задачи, которая входит в задание из нескольких задач. См. Просмотр журнала выполнения задач.
Назначение нового кластера в пользовательском интерфейсе заданий, когда доступ к одному пользователю больше не существует
18–25 апреля 2022 г.: версия 3.70
В этом выпуске устранена проблема, которая удалила кнопку "Переключение кластера" из пользовательского интерфейса заданий Azure Databricks, когда доступ к одному пользователю недоступен. Теперь можно назначить новый кластер заданию в пользовательском интерфейсе, если настроенный кластер недоступен, например из-за изменения сети.
Databricks Runtime 10.5 (бета-версия)
15 апреля 2022 г.
Databricks Runtime 10.5, 10.5 Photon и 10.5 ML теперь доступны в виде бета-версий.
Полные заметки о выпуске в Databricks Runtime 10.5 (EoS) и Databricks Runtime 10.5 для Машинное обучение (EoS).
Пользовательский интерфейс Delta Live Tables улучшен и теперь позволяет отключать несанкционированные действия
4–11 апреля 2022 г.: версия 3.69
Пользовательский интерфейс Delta Live Tables обновлен и теперь позволяет отключить действия конвейера, на выполнение которых у вас нет прав. Например, если у вас есть только разрешение CAN_VIEW, кнопки запуска, остановки и удаления отключены. Ранее выбор запрещенного действия привел к сбою действия.
AutoML общедоступен
4–11 апреля 2022 г.: версия 3.69
AutoML обычно доступен в Databricks Runtime 10.4 LTS ML и выше.
Использование наборов данных из каталога Unity с AutoML
4–11 апреля 2022 г.: версия 3.69
Теперь вы можете выбрать наборы данных из каталога Unity в пользовательском интерфейсе AutoML. Вы должны быть назначенным одним пользователем кластера в режиме доступа к одному пользователю.
Delta Live Tables предоставляются как общедоступная версия (GA) в AWS и Azure и как общедоступная предварительная версия в GCP
5 апреля 2022 г.
Databricks объявляет о выходе общедоступной версии Delta Live Tables в AWS и Microsoft Azure и общедоступной предварительной версии в Google Cloud. Delta Live Tables — это первая платформа ETL, которая использует простой декларативный подход к созданию надежных конвейеров данных. Delta Live Tables автоматически управляет инфраструктурой в большом масштабе, чтобы аналитики и инженеры тратили меньше времени на инструментирование и могли сосредоточиться на извлечении ценности из данных. См. раздел "Что такое разностные динамические таблицы?".
Интерфейс SQL Delta Live Tables: некритическое изменение имен таблиц
5 апреля 2022 г.
В этом выпуске представлено некритическое изменение синтаксиса имен таблиц в интерфейсе SQL Delta Live Tables. Эти изменения соответствуют семантике и синтаксису интерфейса SQL с предстоящими улучшениями платформы Delta Live Tables. Для поддержки этих будущих улучшений мы вносим следующие изменения:
- Добавочные динамические таблицы переименованы в таблицы потоковой передачи. Таблицы потоковой передачи наследуют семантику добавочных динамических таблиц. Delta Live Tables будут по-прежнему поддерживать
INCREMENTALв качестве нерекомендуемого ключевого слова для обратной совместимости. - Полные динамические таблицы будут называться просто динамическими таблицами. Динамические таблицы гарантируют, что в конце обновления конвейера содержимое результирующей таблицы будет точно равно результату указанного преобразования для текущих входных данных.