Поделиться через

Март 2023 г.

  • Статья

Эти функции и улучшения платформы Azure Databricks были выпущены в марте 2023 года.

Примечание.

Выпуски являются поэтапными. Ваша учетная запись Azure Databricks может быть обновлена только через неделю или более после первоначальной даты выпуска.

Поставщик Databricks Terraform обновлен до версии 1.14.0

31 марта 2023 г.

Версия 1.14.0 добавляет пример автоматического поворота маркера доступа, run_if условия и триггера прибытия файла в ресурс и многое другое databricks_job . Дополнительные сведения см. в журнале изменений для версии 1.14.0.

Поддержка Databricks Runtime 7.3 LTS ML заканчивается

31 марта 2023 г.

Поддержка Databricks Runtime 7.3 LTS для Машинное обучение закончилась 31 марта. См. статью "Жизненные циклы поддержки Databricks".

Распределенное обучение с помощью TorchDistributor

27 марта 2023 г.

С помощью Databricks Runtime 13.0 ML и более поздних версий можно выполнять распределенное обучение для моделей машинного обучения PyTorch с помощью TorchDistributor. См . распределенное обучение с помощью TorchDistributor.

TorchDistributor — это модуль с открытым исходным кодом в PySpark, который помогает пользователям выполнять распределенное обучение с помощью PyTorch в кластерах Spark, поэтому он позволяет запускать задания обучения PyTorch в качестве заданий Spark.

Databricks Runtime 13.0 (бета-версия)

24 марта 2023 г.

Databricks Runtime 13.0 и Databricks Runtime 13.0 ML теперь доступны в качестве бета-выпусков.

См. статью Databricks Runtime 13.0 (EoS) и Databricks Runtime 13.0 для Машинное обучение (EoS).

Улучшенный редактор файлов

24 марта 2023 г.

Редактор файлов был обновлен, чтобы перенести многие функции записной книжки в интерфейс редактирования файлов. Кроме того, теперь вы можете напрямую выполнять файлы Python, SQL, R и Scala из редактора файлов. Дополнительные сведения см. в разделе Навигация по записной книжке Databricks и редактору файлов.

Изменение избыточности корневого хранилища DBFS для существующих рабочих областей Azure Databricks

23 марта 2023 г.

Теперь у пользователей есть возможность изменить избыточность корневой учетной записи хранения DBFS. См . раздел "Изменение параметров избыточности хранилища рабочей области".

Поддержка записной книжки .ipynb (Jupyter) в Repos (предварительная версия)

22 марта 2023 г.

Поддержка записных книжек Jupyter (IPYNB-файлов) доступна в Репозитории. Вы можете клонировать репозитории с помощью записных книжек IPYNB, работать в пользовательском интерфейсе Databricks, а затем фиксировать и отправлять их в виде записных книжек IPYNB. Метаданные, такие как панель мониторинга записной книжки, сохраняются. Администраторы могут контролировать, могут ли выходные данные быть зафиксированы или нет.

Кроме того, вы можете сделать следующее:

  • Создайте записные книжки IPYNB.
  • Преобразуйте записные книжки в формат ФАЙЛА IPYNB.
  • Просматривайте диффы как диффы кода (изменения кода в ячейках) или необработанные диффы (изменения кода в JSON, включая метаданные).

См. раздел "Разрешить фиксацию выходных данных записной книжки IPynb".

Поддержка перезагрузки4j

21 марта 2023 г.

Reload4j 1.2.19 заменяет log4j в Databricks Runtime версии 10.4 и более ранних версий.

Новые IP-адреса для региона Восточной Азии

15 марта 2023 г.

Azure Databricks добавил новый выделенный уровень управления для eastasia региона. Если вы размещаете рабочую область Azure Databricks в собственной виртуальной сети (также известной как внедрение виртуальной сети) в регионе Восточной Азии, скорее всего, вы управляете сетевым трафиком для рабочей области с помощью пользовательских маршрутов (UDR). В этом случае необходимо обновить эти маршруты при помощи дополнительных IP-адресов и доменов, которые перечислены в разделе IP-адресов и доменов для служб и ресурсов Azure Databricks.

Параллельное выполнение ячеек SQL в записной книжке

15 марта 2023 г.

Теперь ячейки SQL можно запускать в записных книжках Azure Databricks параллельно при подключении к интерактивному кластеру. См . раздел "Параллельное выполнение ячеек SQL".

Создание задач задания с помощью кода Python, хранящегося в репозитории Git

14 марта 2023 г.

Теперь вы можете получить код Python от поставщика Git при добавлении задачи Python в задание Azure Databricks, упрощая интеграцию заданий с рабочими процессами CI/CD. См. статью "Использование Git" с заданиями.

Поставщик Databricks Terraform обновлен до версии 1.13.0

14 марта 2023 г.

Версия 1.13.0 добавляет databricks_sql_alert ресурс и многое другое. Дополнительные сведения см. в журнале изменений для версии 1.13.0.

Поставщик Databricks Terraform обновлен до версии 1.12.0

9 марта 2023 г.

Версия 1.12.0 добавляет databricks_model_serving ресурс, отклоняет schedule блок в ресурсе и многое другое databricks_sql_query . Дополнительные сведения см. в журнале изменений для версии 1.12.0.

Объединенная консоль администрирования SQL и консоль администрирования рабочей области

9 марта 2023 г.

Консоль администрирования SQL была объединена с общими параметрами администратора для создания единого интерфейса для пользователей администрирования. Все параметры администратора SQL теперь доступны из консоли администрирования.

Обслуживание моделей — общедоступная версия

7 марта 2023 г.

Служба моделей, ранее бессерверная вывод в режиме реального времени, теперь общедоступна.

Служба модели предоставляет высокодоступную и низкую задержку службы для развертывания моделей. Служба автоматически масштабируется вверх или вниз, чтобы удовлетворить изменения спроса в выбранном диапазоне параллелизма. См. раздел Развертывание моделей с помощью Mosaic AI Model Serving.

Автоматическая подстановка функций — это общедоступная версия

7 марта 2023 г.

Автоматическая поиск функций с помощью службы моделей теперь общедоступна. Дополнительные сведения см. в статье Автоматическое поиск функций с помощью Службы моделей Databricks.

Для новых рабочих областей, использующих определяемые пользователем учетные записи, IP-адрес хранилища Azure требует дополнительного UDR

6 марта 2023 г.

Из-за изменений в корневом хранилище DBFS для новых рабочих областей новые рабочие области, использующие внедрение виртуальной сети и определяющие определяемые пользователем маршруты (определяемые пользователем) маршруты с помощью IP-адресов вместо рекомендуемых тегов служб, должны добавлять дополнительные пользовательские учетные данные Azure для каждой виртуальной сети. Сведения о настройке двух определяемых пользователем пользователей см. в разделе IP-адрес корневого хранилища DBFS. Это изменение не влияет на существующие рабочие области.

Корневое хранилище DBFS Azure Databricks использует Azure Data Lake Storage 2-го поколения для новых рабочих областей

6 марта 2023 г.

Новые рабочие области Azure Databricks используют Azure Data Lake Storage 2-го поколения учетные записи хранения для корневого каталога DBFS. Существующие рабочие области Azure Databricks продолжают использовать хранилище BLOB-объектов для корневого каталога DBFS. Общие сведения о Azure Data Lake Storage 2-го поколения.

Доступность нового обозревателя каталогов

6 марта 2023 г.

Новая версия обозревателя каталогов теперь доступна во всех рабочих областях, использующих поддерживаемую версию Databricks Runtime 7.3 или более поздней.

Просмотр частых запросов и пользователей таблицы с помощью вкладки "Аналитика"

6 марта 2023 г.

Теперь вы можете использовать вкладку "Аналитика" в обозревателе каталогов для просмотра наиболее частых запросов и пользователей любой таблицы, зарегистрированной в каталоге Unity. Для просмотра этих данных необходимо иметь привилегии SELECT на таблицу, и вы увидите только те запросы, к которым у вас есть доступ. См. просмотр частых запросов и пользователей таблицы.

3 марта 2023 г.

Теперь вы можете искать точные фразы, используя кавычки в глобальном поиске. См. статью "Поиск объектов рабочей области".

Просмотр сведений о происхождении заданий Azure Databricks

3 марта 2023 г.

Если Unity Catalog включен в рабочей области, вы можете просмотреть информацию о связях заданий в пользовательском интерфейсе заданий Azure Databricks, включая вышестоящие таблицы, из которых задание считывает данные, и нижестоящие таблицы, в которые задание записывает данные. Просмотр сведений о происхождении задания.

Databricks Runtime 12.2 LTS и Databricks Runtime 12.2 LTS ML являются общедоступными

2 марта 2023 г.

Databricks Runtime 12.2 LTS и Databricks Runtime 12.2 LTS ML теперь общедоступны.

Дополнительные сведения см. в разделе Databricks Runtime 12.2 LTS и Databricks Runtime 12.2 LTS для Машинное обучение.

Файлы рабочей области теперь доступны в общедоступной предварительной версии

6 марта 2023 г.

Теперь вы можете работать с файлами без записных книжек в Azure Databricks. Файлы рабочих областей включены по умолчанию во всех рабочих областях. См. раздел " Что такое файлы рабочей области?".