Поделиться через

Май 2023 г.

  • Статья

Эти функции и улучшения платформы Azure Databricks были выпущены в мае 2023 года.

Примечание.

Выпуски являются поэтапными. Ваша учетная запись Azure Databricks может быть обновлена только через неделю или более после первоначальной даты выпуска.

Создание или изменение пользовательского интерфейса таблицы поддерживает отправку avro, Parquet и текстовых файлов

29 мая 2023 г.

Теперь пользовательский интерфейс создания или изменения таблицы поддерживает следующие типы файлов:

  • Avro (.avro)
  • Parquet (.parquet)
  • Текст (TXT)

Дополнительные сведения см. в статье "Создание или изменение таблицы с помощью отправки файла".

Использование пользовательского интерфейса добавления данных для загрузки данных с помощью внешних расположений каталога Unity (общедоступная предварительная версия)

29 мая 2023 г.

Теперь можно использовать пользовательский интерфейс добавления данных для загрузки данных из пути к хранилищу облачных объектов, который определяется как внешнее расположение каталога Unity. Дополнительные сведения см. в разделе "Загрузка данных с помощью внешнего расположения каталога Unity".

Запуск записных книжек Databricks в хранилищах SQL (общедоступная предварительная версия)

31 мая 2023 г.

Теперь вы можете запускать записные книжки Databricks в хранилищах SQL. Хранилища SQL оптимизированы для аналитики SQL и обеспечивают более высокую ценовую производительность для выполнения SQL по сравнению с вычислениями всех целей. Дополнительные сведения см. в статье "Использование записной книжки с хранилищем SQL".

Запретить вводу ключа принимать предложение автозавершения

26 мая 2023 г.

Теперь можно запретить вводу клавиши ВВОД принимать предложения автозаполнения в редакторе SQL. Выберите "Отключить ввод", чтобы принять автозавершение в меню kebab в редакторе SQL.

Новый регион: Китай Восточная 3

25 мая 2023 г.

Azure Databricks теперь доступен в регионе Azure East 3. Ознакомьтесь с регионами Azure Databricks.

Поддержка типов виртуальных машин конфиденциальных вычислений Azure (общедоступная предварительная версия)

25 мая 2023 г.

Azure Databricks теперь поддерживает использование типов виртуальных машин конфиденциальных вычислений Azure при создании кластеров. Конфиденциальные вычисления Azure помогают защитить используемые данные, предотвращая доступ поставщика облачных служб к конфиденциальным данным. Ознакомьтесь с виртуальными машинами конфиденциальных вычислений Azure.

Поставщик Databricks Terraform обновлен до версии 1.17.0

22 мая 2023 г.

Поставщик Databricks Terraform 1.17.0 удаляет поддержку выпуска 32-разрядных двоичных файлов, добавляет дополнительные сведения о влиянии на использование политики кластера в ресурсе и многое другое databricks_cluster . Дополнительные сведения см. в журнале изменений для версии 1.17.0.

Отправка пользовательского интерфейса данных поддерживает новые типы данных столбцов

19 мая 2023 г.

Пользовательский интерфейс отправки данных теперь поддерживает следующие типы данных столбцов:

  • STRUCT
  • ARRAY
  • DECIMAL(P,S)

Дополнительные сведения см. в статье "Создание или изменение таблицы с помощью отправки файла".

Привязка каталогов каталога Unity к определенным рабочим областям

17 мая 2023 г.

Теперь вы можете ограничить доступ к определенным рабочим областям в вашей учетной записи, также называемой привязкой каталога рабочей области. Эта функция особенно полезна при использовании рабочих областей для изоляции доступа к данным пользователей, например при наличии отдельных рабочих областей и рабочих областей разработки или выделенной рабочей области для обработки конфиденциальных данных.

Дополнительные сведения см. в разделе "Ограничение доступа к каталогам" для определенных рабочих областей.

Все пользователи могут подключаться к Fivetran с помощью Partner Connect (общедоступная предварительная версия)

17 мая 2023 г.

Роль администратора рабочей области больше не требуется для подключения к Fivetran с помощью Partner Connect. Дополнительные сведения см. в разделе "Подключение к Fivetran" с помощью Partner Connect.

Поставщик Databricks Terraform обновлен до версии 1.16.1

16 мая 2023 г.

Поставщик Databricks Terraform 1.16.1 добавляет документацию по интеграции с ресурсом databricks_service_principal_secret и каталогом Unity в ресурсе, обновления документации по ресурсу и многое databricks_pipeline другое databricks_secret_scope . Дополнительные сведения см. в журнале изменений версии 1.16.1.

Драйвер JDBC Databricks 2.6.33

15 мая 2023 г.

Мы выпустили версию 2.6.33 драйвера JDBC Databricks (скачать). Этот выпуск добавляет API-интерфейсы первичного ключа и внешнего ключа при подключении к серверу с включенным каталогом Unity.

Partner Connect поддерживает Alation

15-22 мая 2023 г.

Теперь вы можете подключить рабочую область Azure Databricks к Alation с помощью Partner Connect. Дополнительные сведения см. в статье "Подключение Azure Databricks к Alation".

Новая тема по умолчанию для редактора

12 мая 2023 г.

На основе отзывов клиентов цветовая схема по умолчанию в редакторе была обновлена для повышения удобочитаемости.

Поставщик Databricks Terraform обновлен до версии 1.16.0

12 мая 2023 г.

Поставщик Databricks Terraform 1.16.0 добавляет databricks_workspace_file ресурс, добавляет notification_settings блок к ресурсу и многое другое databricks_job . Дополнительные сведения см. в журнале изменений версии 1.16.0.

Поддержка каталога Unity для управляемых удостоверений Azure теперь общедоступна

11 мая 2023 г.

Возможность использовать управляемые удостоверения Azure для доступа к контейнерам хранилища от имени пользователей каталога Unity теперь общедоступна. Управляемые удостоверения Azure предоставляют значительные преимущества по сравнению с субъектами-службами для этого варианта использования. См. статью Доступ к хранилищу с помощью управляемых удостоверений Azure в Unity Catalog.

Databricks Runtime 13.1 (бета-версия)

10 мая 2023 г.

Databricks Runtime 13.1 и Databricks Runtime 13.1 ML теперь доступны в качестве бета-выпусков.

См. статью Databricks Runtime 13.1 (EoS) и Databricks Runtime 13.1 для Машинное обучение (EoS).

Выполнение запросов SQL на основе файлов в рабочем процессе Azure Databricks

9 мая 2023 г.

Теперь запросы SQL можно получить от поставщика Git при добавлении задачи SQL в задание Azure Databricks. См. статью "Использование Git" с заданиями.

Поставщик Databricks Terraform обновлен до версии 1.15.0

5 мая 2023 г.

Версия 1.15.0 добавляет экспериментальный databricks_sql_table ресурс, добавляет поддержку выполнения databricks_cluster скриптов инициализации из файлов рабочей области, добавляет отсутствующие разрешения databricks_grantsи многое другое. Дополнительные сведения см. в журнале изменений для версии 1.15.0.

Регионы Azure Для Китая теперь поддерживают каталог Unity

5 мая 2023 г.

Восточная часть Китая 2, Северная Китай 2 и Северная 3 регионы теперь поддерживают каталог Unity.

Псевдонимы учетных записей теперь доступны в консоли учетной записи

5 мая 2023 г.

Теперь администраторы учетных записей могут задавать псевдонимы учетных записей Azure Databricks. После получения псевдонима учетной записи имя отображается в верхней части консоли учетной записи и рядом с идентификатором учетной записи. Дополнительные сведения см. в разделе "Добавление псевдонима учетной записи".

Совместное использование записных книжек с помощью разностного общего доступа

4 мая 2023 г.

Теперь можно использовать разностный общий доступ для безопасного совместного использования файлов записных книжек с помощью потока общего доступа Databricks в Databricks.

Совместное использование записных книжек позволяет пользователям совместно работать в хранилищах метаданных и учетных записях, а также позволяет поставщикам продемонстрировать варианты использования и визуализации для данных, которыми они совместно используются.

См. статью "Добавление файлов записной книжки в общую папку ( для поставщиков) и чтение общих записных книжек (для получателей).

Azure Databricks больше не создает бессерверный начальный хранилище SQL

3-12 мая 2023 г.

Azure Databricks больше не создает бессерверное начальное хранилище SQL. Сведения о создании собственного хранилища см. в статье "Создание хранилища SQL".

В API хранилищах SQL включение бессерверных вычислений теперь должно быть явным

3-12 мая 2023 г.

При создании хранилища SQL произошло незначительные изменения в API хранилищ SQL.

Для поля enable_serverless_computeранее использовалось значение по умолчанию true , если для рабочей области были включены бессерверные конечные точки SQL. Теперь для большинства рабочих областей используется false значение по умолчанию. Однако если эта рабочая область использовала API хранилищ SQL для создания хранилища в период с 1 ноября 2022 по 19 мая 2023 г. и соответствует требованиям для бессерверного хранилища SQL, включая его регион, значение по умолчанию остается равным true.

Чтобы избежать неоднозначности, особенно для организаций с множеством рабочих областей, Databricks настоятельно рекомендует явно задать enable_serverless_compute поле.

Изменения параметров рабочей области для бессерверных хранилищ SQL

3-12 мая 2023 г.

Для учетных записей с поддержкой бессерверных вычислений рабочие области теперь включены для бессерверных функций по умолчанию. В рамках этого изменения параметр уровня рабочей области для включения или отключения бессерверных хранилищ SQL был удален из пользовательского интерфейса параметров рабочей области.

Изменения бессерверных параметров вычислений для учетных записей и рабочих областей

3-12 мая 2023 г.

Теперь все рабочие области включены для бессерверных хранилищ SQL, если регион поддерживает его.

Azure Databricks уведомляет каждого администратора рабочей области один раз в пользовательском интерфейсе SQL Databricks для каждой рабочей области.

Для новых рабочих областей для поддержки бессерверных хранилищ SQL каждая рабочая область должна соответствовать требованиям и может потребовать обновления для служба хранилища Azure брандмауэра каждой рабочей области.

Databricks SQL Serverless — общедоступная версия

3-12 мая 2023 г.

Databricks SQL Serverless теперь общедоступен в поддерживаемых регионах. Бессерверные хранилища SQL обеспечивают мгновенное вычисление, минимальное управление и оптимизацию затрат для запросов SQL. Создайте бессерверные хранилища SQL или преобразуйте в бессерверные или классические хранилища SQL.

3 мая 2023 г.

Вы можете включить безопасное подключение к кластеру (SCC) в существующей рабочей области , чтобы у виртуальной сети не было открытых портов и узлов кластера Databricks Runtime нет общедоступных IP-адресов. Эта функция настраивается в шаблонах Azure с помощью имени No Public IP (enableNoPublicIp).

Вы можете включить или отключить Приватный канал Azure в существующей рабочей области для частного подключения между пользователями и рабочими областями Databricks, а также между вычислительными ресурсами и уровнем управления инфраструктуры Azure Databricks.

Оба обновления требуют, чтобы рабочая область применяла внедрение виртуальной сети и ценовую категорию "Премиум".

Нерекомендуемые скрипты инициализации кластера в DBFS

2 мая 2023 г.

Скрипты для инициализации кластера в DBFS устарели. Вместо этого они должны храниться в виде файлов рабочей области. См . скрипты инициализации Магазина в файлах рабочей области.

Унифицированная навигация (общедоступная предварительная версия)

1 мая 2023 г.

Новый унифицированный интерфейс навигации доступен в общедоступной предварительной версии. Унифицированная навигация сокращает количество щелчков и переключение контекста, необходимые для выполнения задач в разных областях продукта. Дополнительные сведения см. в статье "Навигация по рабочей области".