Поделиться через

Апрель 2023 г.

  • Статья

Эти функции и улучшения платформы Azure Databricks были выпущены в апреле 2023 года.

Примечание.

Выпуски являются поэтапными. Ваша учетная запись Azure Databricks может быть обновлена только через неделю или более после первоначальной даты выпуска.

Databricks Marketplace (общедоступная предварительная версия): открытая платформа для данных, аналитики и ИИ

27 апреля 2023 г.

Теперь вы можете использовать Databricks Marketplace для обнаружения, доступа и развертывания сотен продуктов данных в рабочих процессах ИИ и аналитики. Databricks Marketplace использует преимущества Delta Sharing, чтобы обеспечить безопасный и простой общий доступ как бесплатных, так и коммерческих продуктов данных в любом облаке или регионе. См. раздел "Что такое Databricks Marketplace?".

Настройка модуля форматирования Python

25 апреля 2023 г.

Для файлов и записных книжек в Databricks Repos теперь можно настроить модуль форматирования Python на основе черной спецификации. См . библиотеку черного форматирования Python.

Файлы рабочей области — общедоступная версия

24 апреля 2023 г.

Теперь вы можете работать с файлами без записных книжек в Azure Databricks. Файлы рабочих областей включены по умолчанию во всех рабочих областях. См. раздел " Что такое файлы рабочей области?".

Скрипты инициализации в области кластера теперь можно хранить в файлах рабочей области

24 апреля 2023 г.

Теперь вы можете хранить скрипты инициализации кластера в файлах рабочих областей независимо от версии среды выполнения Databricks, используемой вычислительными ресурсами. Databricks рекомендует хранить все скрипты инициализации кластера в файлах рабочей области. См . скрипты инициализации Магазина в файлах рабочей области.

Создание области секрета с поддержкой Azure Key Vault с помощью субъекта-службы

19 апреля 2023 г.

Теперь можно создать область секрета, поддерживаемую Azure Key Vault, с помощью субъекта-службы. См. статью "Управление областями секретов"

Новые привилегии для общего доступа обеспечивают делегирование общих, получателей и задач управления поставщиками

18 апреля 2023 г.

Новые привилегии USE SHARE, USE RECIPIENTUSE PROVIDERи SET SHARE PERMISSION включение делегирования общих, получателей и задач управления поставщиками, которые в противном случае требуют роли администратора хранилища метаданных или владения объектами. Эти привилегии позволяют ограничить количество пользователей, имеющих мощную роль администратора хранилища метаданных. Ознакомьтесь с типами привилегий, которые применяются только к Delta Sharing или Databricks Marketplace.

Databricks Connect версии 2 (общедоступная предварительная версия)

17 апреля 2023 г.

Начиная с Databricks Runtime 13.0, Databricks Connect основывается на Spark Connect, что позволяет разработчикам использовать возможности Databricks и их интегрированной среды разработки для интерактивного разработки и отладки кода в любой рабочей области Azure Databricks.

Новый пользовательский интерфейс метрик кластера

14 апреля 2023 г.

Кластеры, использующие Databricks Runtime 13.0 и выше, имеют доступ к новому пользовательскому интерфейсу метрик кластера. Эта функция заменяет Ganglia в качестве средства мониторинга метрик кластера. Новый пользовательский интерфейс метрик кластера включает динамическое представление производительности кластера и пользовательские поминутные исторические представления. Дополнительные сведения см. в разделе "Просмотр метрик вычислений".

Databricks Runtime 13.0 — общедоступная версия

14 апреля 2023 г.

Databricks Runtime 13.0 и Databricks Runtime 13.0 ML теперь общедоступны.

См. статью Databricks Runtime 13.0 (EoS) и Databricks Runtime 13.0 для Машинное обучение (EoS).

Управление доступом к консоли учетной записи по диапазонам IP-адресов (общедоступная предварительная версия)

17 апреля 2023 г.

Теперь консоль учетных записей Azure Databricks поддерживает списки доступа к IP-адресам для управления доступом к консоли учетной записи по диапазонам IP-адресов, аналогичным существующей поддержке списков доступа к IP-адресам для рабочих областей. Используйте пользовательский интерфейс консоли учетной записи или REST API для управления доступом. Список доступа к IP-адресам см. в разделе "Настройка списков доступа к IP-адресам" для консоли учетной записи.

Когда Azure Databricks блокирует запрос, Azure Databricks создает новое событие в журналах аудита на уровне учетной записи со службой accounts и событием accountIpAclsValidationFailed. См . справочник по журналу диагностики.

Поставщик Databricks Terraform обновлен до версии 1.14.3

14 апреля 2023 г.

Версия 1.14.3 добавляет поддержку экспортера, добавляет поддержку databricks_sql_alertуведомлений и databricks_pipelineмногое другое. Дополнительные сведения см. в журнале изменений версии 1.14.3.

Записи журнала диагностики для измененных параметров администратора для рабочей области

14 апреля 2023 г.

Теперь в журналах диагностики рабочей области есть события журнала аудита для изменения некоторых параметров администратора. accounts В службе имена новых действий событий и deleteSettingsetSetting. См . справочник по журналу диагностики. Не все параметры создают аудируемые события.

Для начального управляемого клиентом ключа для управляемых дисков Azure Databricks теперь завершает вычислительные ресурсы.

10 апреля 2023 г.

Ранее первоначально добавление ключа, управляемого клиентом , для управляемых дисков перезапускает все работающие вычислительные ресурсы (кластеры, пулы). Теперь вычислительные ресурсы завершаются вместо перезапуска, что означает, что после завершения обновления вам необходимо вручную их запустить. Azure Databricks запрещает запуск или запуск кластеров при добавлении ключа. Запланируйте простой и завершите все вычислительные ресурсы перед добавлением ключа, чтобы предотвратить автоматическое завершение работы, что может вызвать проблемы для некоторых типов рабочих нагрузок.

Для рабочей области, которая уже имеет управляемый клиентом ключ для управляемых дисков, если вы смените ключ, вам не нужно завершать вычислительные ресурсы.

Поставщик Databricks Terraform обновлен до версий 1.14.1 и 1.14.2

4-6 апреля 2023 г.

Версия 1.14.1 исключает роли в вызовах списка API SCIM, чтобы снизить нагрузку на службу Databricks SCIM и многое другое. Версия 1.14.2 добавляет задачу SQL-файла в databricks_job ресурс, устраняет несколько ошибок и многое другое. Дополнительные сведения см. в журнале изменений для версий 1.14.1 и 1.14.2.

Объединенные параметры пользователя SQL и общие параметры пользователя

3-5 апреля 2023 г.

Параметры пользователя SQL были объединены с общими параметрами пользователя рабочей области для создания единого интерфейса для пользователей рабочей области. Все параметры пользователя SQL теперь доступны из параметров:

  • Теперь вкладка "Пароль" — это вкладка "Учетная запись и пароль".
  • Вкладка фрагментов запросов отображается пользователям с правами SQL.

Устаревшие визуализации записных книжек устарели

4 апреля 2023 г.

Создание и редактирование устаревших визуализаций записных книжек устарело и будет удалено из продукта в ближайшее время. Существующие устаревшие визуализации будут по-прежнему отображаться. Сведения будут отображаться в уведомлениях в продукте.

Создание или изменение таблицы на странице отправки файлов поддерживает отправку ФАЙЛОВ JSON

3 апреля 2023 г.

Страница Создание или изменение таблицы из страницы отправки файлов теперь поддерживает отправку ФАЙЛОВ JSON. Дополнительные сведения см. в статье Создание или изменение таблицы с помощью загрузки файлов.