2021 октября
Эти функции и улучшения платформы Azure Databricks стали доступны в октябре 2021 г.
Примечание.
Выпуски являются поэтапными. Ваша учетная запись Azure Databricks может быть обновлена только через неделю или более после первоначальной даты выпуска.
Прекращение поддержки Databricks Runtime 8.2
22 октября 2021 г.
Поддержка Databricks Runtime 8.2 и Databricks Runtime 8.2 для Машинного обучения завершилась 22 октября. См. статью "Жизненные циклы поддержки Databricks".
Общедоступная версия Databricks Runtime 10.0 и 10.0 ML; общедоступная предварительная версия 10.0 Photon
20 октября 2021 г.
Databricks Runtime 10.0 и 10.0 ML теперь являются общедоступными. 10.0 Photon является общедоступной предварительной версией.
См. заметки о выпуске в Databricks Runtime 10.0 (EoS) и Databricks Runtime 10.0 для машинного обучения (EoS).
Улучшения пользовательского интерфейса для Delta Live Tables (общедоступная предварительная версия)
18–25 октября 2021 г.: версия 3.57
Этот выпуск включает следующие улучшения пользовательского интерфейса Delta Live Tables:
- Сообщение Записная книжка не найдена теперь отображается в диалоговом окне создания конвейера или в панели сведений о наборе данных, когда указан недопустимый путь к записной книжке.
- Теперь вы можете отправить отзыв о Delta Live Tables, щёлкнув ссылку Отправить отзыв на странице Конвейеры или на странице Сведения о конвейере. Щелкнув ссылку предоставить отзыв, в новом окне откроется опрос отзывов клиентов.
Укажите кластер фиксированного размера при создании нового конвейера в Delta Live Tables (общедоступная предварительная версия)
18–25 октября 2021 г.: версия 3.57
Теперь вы можете создать кластер для конвейера Delta Live Tables с фиксированным числом рабочих узлов, обеспечивая больше контроля над ресурсами кластера, используемыми конвейером. Чтобы создать кластер с фиксированным количеством узлов, снимите флажок Включить автомасштабирование и введите количество узлов в поле рабочие роли при создании нового конвейера.
Просмотр метрик качества данных для таблиц в триггерных конвейерах Delta Live Tables (доступная по предварительному просмотру)
18–25 октября 2021 г.: версия 3.57
Теперь вы можете увидеть метрики качества данных для таблиц, когда ваш конвейер запускается в активированном режиме, включая количество записанных записей, количество удаленных записей и количество записей, прошедших или не прошедших каждое ограничение качества данных. Чтобы просмотреть метрики качества данных, выберите таблицу на вкладке Graph на странице Pipeline Details.
Общедоступная версия оркестрации заданий
14 октября 2021 г.
Команда Databricks рада сообщить об общей доступности оркестрации заданий Azure Databricks. Оркестрация заданий позволяет определять и запускать задания с несколькими задачами, что упрощает создание, планирование, выполнение и мониторинг сложных приложений для работы с данными и машинного обучения. Оркестрация заданий по умолчанию отключена, и ее должен включать администратор. См . инструкции по расписанию и оркестрации рабочих процессов.
Команда Databricks также с радостью сообщает об общей доступности API заданийверсии 2.1. Эта версия включает обновления, полностью поддерживающие оркестрацию нескольких задач заданиями Azure Databricks. Сведения об обновлении клиентов для поддержки заданий, которые оркеструют несколько задач, см. в статье об обновлении API заданий 2.0 до версии 2.1 .
Databricks Connector для Power BI
13 октября 2021 г.
Доступна новая версия соединителя Power BI. Этот выпуск добавляет поддержку навигации через трехуровневые пространства имен в каталоге Unity, гарантирует, что выполнение запроса может быть отменено, и включает сквозное выполнение нативных запросов для уменьшения задержки в Databricks SQL и Databricks Runtime 8.3 и выше.
Поддержка произвольных типов файлов в Repos
7 октября 2021 г.
Помимо синхронизации записных книжек с удаленным репозиторием Git, Файлы в Репозитории позволяют синхронизировать любой тип файла, например файлы .py
, файлы данных в формате .csv
или .json
или файлы конфигурации .yaml
. Вы можете импортировать и читать эти файлы в репозитории Databricks. Кроме того, вы можете просматривать и редактировать текстовые файлы в пользовательском интерфейсе. Дополнительные сведения см. в разделе интеграции Git для папок Git Databricks.
Получение подробных выходных данных выполнения задания с помощью API заданий
4–11 октября 2021 г.: версия 3.56
Ответ на запрос Runs get output от API заданий обновляется: добавляются новые поля для возврата дополнительных данных, логирования и подробной информации об ошибках для выполнений заданий.
Улучшение удобочитаемости путей записных книжек в пользовательском интерфейсе заданий
4–11 октября 2021 г.: версия 3.56
При просмотре сведений о задании в пользовательском интерфейсе заданий пути записных книжек теперь обрезаются слева, что гарантирует видимость имени записной книжки. Ранее пути к записной книжке обрезались справа, что часто закрывало имя записной книжки.
Откройте ваш Delta Live Tables пайплайн в новой вкладке или окне
4–11 октября 2021 г.: версия 3.56
Имена конвейеров теперь отображаются в виде ссылки при просмотре списка конвейеров в интерфейсе Delta Live Tables UI, предоставляя доступ к возможностям контекстного меню, таким как открытие сведений о конвейере в новой вкладке или новом окне.
Новая escape-последовательность для $
в традиционных мини-приложениях ввода в SQL
4–11 октября 2021 г.: версия 3.56
Чтобы экранировать символ $
в традиционных мини-приложениях ввода в SQL, используйте \$
. Если вы использовали $\
в существующих мини-приложениях, они продолжают работать, но Databricks рекомендует обновить мини-приложения для использования новой последовательности экранирования. См. статью Мини-приложения.
Ускорение развертывания модели с автоматически созданной записной книжкой пакетного вывода
4–11 октября 2021 г.: версия 3.56
После регистрации модели в реестре моделей вы можете автоматически создать ноутбук для использования модели для пакетной обработки или создать конечную точку для работы модели в реальном времени. Дополнительные сведения см. в разделе Использование модели для вывода.