Поделиться через

2021 мая

  • Статья

Эти функции и улучшения для Azure Databricks были выпущены в мае 2021 г.

Примечание.

Выпуски являются поэтапными. Ваша учетная запись Azure Databricks может быть обновлена только через неделю или более после первоначальной даты выпуска.

Databricks Mosaic AI: собственное и совместное решение для полного жизненного цикла машинного обучения

27 мая 2021 г.

Новый пользователь Машинного обучения, который можно выбрать на боковой панели пользовательского интерфейса Azure Databricks, обеспечивает легкий доступ к новой специализированной среде ML, включая реестр моделей и четыре новые функции в общедоступной предварительной версии:

  • Новая страница панели мониторинга с удобными ресурсами, недавно используемым содержимым и ссылками для начала работы.
  • Новая страница экспериментов, на которой можно централизованно выполнять обнаружение и администрирование экспериментов.
  • AutoML— это способ автоматического создания моделей машинного обучения из данных и ускорения их внедрения в рабочую среду.
  • Магазин компонентов, способ каталогизировать функции машинного обучения и сделать их доступными для обучения и обслуживания, увеличивая повторное использование. С помощью поиска компонентов на основе происхождения данных, при котором используются автоматически регистрируемые источники данных, компоненты можно сделать доступными для практического обучения и обслуживания с помощью упрощенного развертывания модели, не требующего изменений в клиентском приложении.

Дополнительные сведения см. в статье ИИ и машинное обучение в Databricks.

Аналитика SQL переименована в Databricks SQL

27 мая 2021 г.

Аналитика SQL переименована в Databricks SQL. Дополнительные сведения см. в разделе Заметки о выпуске Databricks SQL.

Создание и управление конвейерами ETL с использованием Delta Live Tables (публичная предварительная версия)

26 мая 2021 г.

Databricks рад представить Delta Live Tables, облачную службу, которая делает разработку процессов извлечения, преобразования и загрузки (ETL) простой, надёжной и масштабируемой. Интерактивные таблицы Delta:

  • Предоставляет интуитивно понятный и знакомый декларативный интерфейс для создания конвейеров.
  • Позволяет отслеживать конвейеры обработки данных, визуализировать зависимости и управлять конвейерами и зависимостями в разных средах.
  • Обеспечивает разработку на основе тестирования, применение ограничений, связанных с качеством данных, и применение единых политик обработки ошибок данных.
  • Автоматизирует развертывание ваших конвейеров обработки данных, чтобы вы могли легко обновлять, откатывать и поэтапно повторно обрабатывать данные.

См. Что такое разностные динамические таблицы? для подробных сведений.

Точечные виртуальные машины Azure уже общедоступны

24 мая 2021 г.

Возможность создания кластеров Azure Databricks с помощью Точечных виртуальных машин Azure стала общедоступной. Теперь вы можете получить выгоду от значительно более низкой стоимости точечных экземпляров Azure и сократить совокупную стоимость владения (TCO) с помощью Azure Databricks. Точечные экземпляры Azure применимы в следующих случаях:

Шифрование запросов и журнала запросов Databricks SQL с помощью собственного ключа (общедоступная предварительная версия)

20 мая 2021 г.

Дополнительные сведения см. в статье Заметки о выпуске Databricks SQL 7.4.

Увеличение лимита на число завершенных универсальных кластеров

18 мая 2021 г.: версия 3.46

Теперь в рабочей области Azure Databricks вы можете использовать до 150 универсальных кластеров, работа которых была завершена. Ранее ограничение составило 120. Дополнительные сведения см. в разделе "Завершение вычисления". Ограничение на количество завершенных универсальных кластеров, возвращаемых запросом к API кластеров , теперь также составляет 150.

Увеличение предельного числа закрепленных кластеров

18 мая 2021 г.: версия 3.46

Теперь в рабочей области Azure Databricks может быть до 70 закрепленных кластеров. Ранее ограничение составило 50. Дополнительные сведения см. в разделе "Закрепление вычислений"

Управление хранением результатов записной книжки (общедоступная предварительная версия)

18 мая 2021 г.: версия 3.46

Теперь вы можете хранить все результаты записной книжки в корневом экземпляре службы хранилища Azure независимо от размера или типа выполнения. По умолчанию некоторые результаты для интерактивных записных книжек хранятся в Azure Databricks. Новая конфигурация позволяет хранить их в корневом экземпляре службы хранилища Azure в вашей учетной записи. Дополнительные сведения см. в разделе "Настройка расположения хранилища результатов записной книжки".

Эта функция не влияет на записные книжки, выполняемые как задания, результаты которых всегда хранятся в корневом экземпляре службы хранилища Azure.

Шифрование записных книжек и секретных данных на уровне управления с помощью собственного ключа (общедоступная предварительная версия)

10 мая 2021 г.

Рабочая область Azure Databricks состоит из плоскости управления, размещенной в управляемой подписке Azure Databricks, и плоскости вычислений, развернутой в подписке Azure. Уровень управления хранит данные управляемых служб, в том числе команды записной книжки, секреты и другие данные конфигурации рабочей области. По умолчанию эти данные шифруются с помощью управляемого ключом Azure Databricks, но теперь можно добавить ключ из экземпляра Azure Key Vault для шифрования этих данных. Подробные сведения см. в статье Включение ключей, управляемых клиентом, для управляемых служб.

Прекращение поддержки Databricks Runtime серии 7.4

3 мая 2021 г.

Поддержка Databricks Runtime 7.4, Databricks Runtime 7.4 для Машинного обучения и Databricks Runtime 7.4 for Genomics прекращена 3 мая. См. статью "Жизненные циклы поддержки Databricks".

Пользователи репозиториев теперь могут интегрироваться с Azure DevOps, используя личные маркеры доступа

3-10 мая 2021 г.: версия 3.45

Помимо маркеров доступа к идентификатору Microsoft Entra, теперь можно использовать личный маркер доступа для проверки подлинности с помощью Azure DevOps. Дополнительные сведения см. в разделе Настройка папок Databricks Git (Repos).