2020 октября
Эти функции и улучшения платформы Azure Databricks стали доступны в октябре 2020 г.
Примечание.
Выпуски являются поэтапными. На обновление вашей учетной записи Azure Databricks может потребоваться до одной недели с даты выпуска.
В онлайн-службе Power BI доступен новый соединитель Power BI для Azure Databricks (общедоступная предварительная версия)
28 октября 2020 г.
Новый соединитель Power BI Azure Databricks, выпущенный в составе Power BI Desktop в сентябре (общедоступная предварительная версия), теперь также доступен в службе Power BI (также известной как Power BI online).
Собственный соединитель позволяет подключаться к Azure Databricks из Power BI Desktop с помощью учетных данных Microsoft Entra ID и к службе Power BI с использованием единого входа (SSO). Благодаря поддержке DirectQueryсобственный соединитель позволяет получать доступ к данным непосредственно в Azure Databricks, запрашивая новые данные и обеспечивая управление безопасностью озера данных. Если вы используете службу Power BI, единый вход гарантирует, что все пользователи отчетов получают доступ к Azure Databricks с собственными учетными данными, не требуется дублировать элементы управления безопасностью в Power BI. Соединитель основан на драйвере ODBC для Databricks, который был оптимизирован для ускорения передачи результатов.
Дополнительные сведения см. в статье "Подключение Power BI к Azure Databricks".
Databricks Runtime 7.4 (бета-версия)
21 октября 2020 г.
Databricks Runtime 7.4, Databricks Runtime 7.4 ML и Databricks Runtime 7.4 для Genomics теперь доступны в качестве бета-версий.
Дополнительные сведения см. в полных заметках о выпуске в Databricks Runtime 7.4 (EoS) и Databricks Runtime 7.4 для машинного обучения (EoS).
Использование ключей, управляемых клиентом, для корневой папки DBFS (общедоступная версия)
21 октября 2020 г.
Возможность использовать собственный ключ шифрования в Azure Key Vault для шифрования учетной записи хранения DBFS теперь является общедоступной. Для этой функции требуется план "Премиум". Ознакомьтесь с ключами, управляемыми клиентом, для корневого каталога DBFS.
Расширенное управление доступом к эксперименту (списки ACL)
20–27 октября 2020 г.: версия 3.31
Развернутые разрешения на уровне эксперимента, появившиеся на платформе Azure Databricks версии 3.29 (23–29 сентября 2020 г.), теперь доступны для всех развертываний.
Дополнительные сведения см. в статье списки ACL эксперимента MLflow.
Импорт и экспорт файлов записных книжек Jupyter (ipynb) с высокой точностью
20–27 октября 2020 г.: версия 3.31
Azure Databricks теперь обеспечивает высокую точность импорта и экспорта записных книжек в формат файлов записной книжки Jupyter (ipynb). При импорте файлов записной книжки Jupyter, которые были первоначально экспортированы из Azure Databricks, результаты и панели мониторинга сохраняются. Ранее это было доступно только для внешнего формата DBC. Благодаря этому обновлению операций с записной книжкой Jupyter записные книжки Azure Databricks стали совместимы с такими инструментами, как GitHub, nbformat, nbdime и nbconvert.
Улучшение API SCIM: в ответе с записями пользователя возвращаются группы, к которым пользователь принадлежит напрямую и косвенно
20–27 октября 2020 г.: версия 3.31
Записи пользователей, возвращаемые API SCIM, теперь соответствуют стандарту SCIM RFC-7643: в ответе отображаются группы, в которые включен пользователь. SCIM RFC-7643 определяет два типа членства в группах: прямое и косвенное. Ранее API возвращал только данные о прямом членстве. Теперь он возвращает данные как о прямом, так и о косвенном членстве. Ответ также содержит новое поле type
с указанием типа членства. См . API групп.
Теперь в исключения включен идентификатор запроса Azure
20–27 октября 2020 г.: версия 3.31
Теперь для упрощения процесса устранения неполадок идентификатор запроса Azure (x-ms-client-request-id
) указывается в следующих журналах:
- События кластера
- Служебные журналы для регистрации исключений в Azure
- Журналы использования
AzureLaunchException
Прекращение поддержки Databricks Runtime 6.5
14 октября 2020 г.
Поддержка Databricks Runtime 6.5, Databricks Runtime 6.5 для машинного обучения и Databricks Runtime 6.5 для Genomics закончилась 14 октября. См. статью "Жизненные циклы поддержки Databricks".
Безопасное подключение кластера (без общедоступных IP-адресов) предоставляется в общедоступной предварительной версии
13 октября 2020 г.: версия 3.30
Безопасное подключение к кластеру позволяет запускать кластеры, в которых все узлы имеют только частные IP-адреса, что способствует повышению уровня безопасности. Вы можете включить безопасное подключение к кластеру для новых рабочих областей. Если у вас есть рабочие области с общедоступными IP-адресами, которые вы хотите перенести, следует создать новые рабочие области, поддерживающие безопасное подключение к кластеру, и перенести ресурсы в новые рабочие области. Для получения дополнительных сведений обратитесь к группе учетных записей Майкрософт или Databricks.
Дополнительные сведения см. в разделе "Включение безопасного подключения к кластеру".
Улучшение API SCIM: $ref
ответ на поле
7–13 октября 2020 г.: версия 3.30
В ответах SCIM поле $ref
содержало внутреннее имя узла в URI. Теперь в соответствии с требованиями SCIM RFC-7463 ответы SCIM содержат в поле $ref
относительный URI.
Журналы диагностики (аудита) теперь предоставляются с низкой задержкой
7–13 октября 2020 г.: версия 3.30
Журналы аудита диагностики теперь доставляются с низкой задержкой, в коммерческих регионах Azure 99 % журналов доставляется в течение 15 минут. Для обеспечения доставки с низкой задержкой никаких действий выполнять не требуется. См. раздел "Настройка доставки журналов диагностики".
Для Databricks Runtime 7.3, 7.3 ML и 7.3 Genomics объявлена долгосрочная поддержка (LTS)
8 октября 2020 г.
Для выпусков Databricks Runtime 7.3, Databricks Runtime 7.3 для машинного обучения и Databricks Runtime 7.3 для Genomics объявлено о долгосрочной поддержке (LTS).
Azure Databricks предоставляет два полных года поддержки для выпусков LTS. Эти выпуски поддерживаются до 24 сентября 2022 г.
Дополнительные сведения об этих версиях Databricks Runtime см. в заметках о выпуске Databricks Runtime 7.3 LTS (EoS), Databricks Runtime 7.3 LTS для Машинное обучение (EoS) и Databricks Runtime 12.1 (EoS).
Отрисовка изображений с более высоким разрешением с помощью Matplotlib
7–13 октября 2020 г.: версия 3.30
Теперь можно выводить изображения Matplotlib в записных книжках Python с разрешением, превышающим стандартное вдвое (разрешение Retina), что улучшит качество отображения для пользователей с экранами высокого разрешения. См. Преобразование изображений для просмотра с более высоким разрешением.
Создание областей секретов с поддержкой Azure Key Vault при помощи CLI или API Databricks
7–13 октября 2020 г.: версия 3.30
Теперь можно использовать Databricks CLI или Databricks REST API для создания секретных областей на базе Azure Key Vault. См. раздел "Управление областями секретов" и API секретов.
Использование маркеров идентификатора Microsoft Entra для проверки подлинности в интерфейсе командной строки Databricks
7–13 октября 2020 г.: версия 3.30
Теперь вы можете использовать маркеры идентификатора Microsoft Entra для проверки подлинности в интерфейсе командной строки Databricks. См. настройка аутентификации.
Новые регионы Azure (общедоступная предварительная версия)
1 октября 2020 г.
Azure Databricks теперь доступна в регионах Северной Швейцарии, Восточного Китая 2 и Северного Китая 2 в качестве общедоступной предварительной версии.