Июнь 2022 г.
Эти функции и доработки платформы Azure Databricks были выпущены в июне 2022 г.
Примечание.
Выпуски являются поэтапными. Ваша учетная запись Azure Databricks может быть обновлена только через неделю или более после первоначальной даты выпуска.
ALTER TABLE изменения разрешений для каталога Unity
30 июня 2022 г.
В каталоге Unity произошло обновление привилегий, необходимых для выполнения инструкций ALTER TABLE. Ранее для выполнения всех инструкций OWNERSHIP требуется ALTER TABLE таблицы. Теперь OWNERSHIP в таблице требуется только для изменения владельца, предоставления разрешений на таблицу, изменения имени таблицы и изменения определения представления. Для всех других операций метаданных в таблице (например, для обновления комментариев, свойств или столбцов) можно вносить обновления, если у вас есть MODIFY разрешение на таблицу.
См. ALTER TABLE и ALTER TABLE.
Прекращение поддержки Databricks Runtime 6.4 (расширенная поддержка)
30 июня 2022 г.
Поддержка Databricks Runtime 6.4 прекращена 30 июня. См. статью "Жизненные циклы поддержки Databricks".
Прекращение поддержки Databricks Runtime 10.2
22 июня 2022 г.
Поддержка Databricks Runtime 10.2 и Databricks Runtime 10.2 для машинного обучения прекращена 22 июня. См. статью "Жизненные циклы поддержки Databricks".
Драйвер ODBC Databricks 2.6.24
22 июня 2022 г.
Мы выпустили версию 2.6.24 драйвера ODBC для Databricks (скачать). Этот выпуск добавляет поддержку для настройки перевода запросов в синтаксис CTAS, позволяет пользователям переопределяться SQL_ATTR_QUERY_TIMEOUT в соединителе и обновлять библиотеку OpenSSL.
В этом выпуске также решены следующие проблемы:
- Соединитель не разрешает использовать серверные и промежуточные сертификаты без записи точек распространения CRL (CDP).
- При использовании прокси-сервера соединитель задает неправильное имя узла для указания имени сервера SSL (SNI).
Поставщик Terraform для Databricks теперь общедоступен
22 июня 2022 г.
Поставщик Databricks Terraform теперь общедоступен.
Terraform позволяет полностью автоматизировать развертывание для платформ данных с помощью существующих процессов IaC (инфраструктура как код) Terraform.
С помощью поставщика Terraform для Databricks можно определять ресурсы в рабочих областях Azure Databricks, таких как кластеры и задания, а также обеспечить управление доступом, предоставляя разрешения для пользователей, групп и субъектов-служб.
Поставщик Terraform для Databricks предоставляет полный журнал аудита развертываний. Поставщик Terraform для Databricks можно использовать в качестве основы для стратегий аварийного восстановления и обеспечения непрерывности бизнес-процессов.
Поставщик Databricks Terraform также поддерживает каталог Unity (предварительная версия), что позволяет развертывать эту функцию управления ключами с легкостью и масштабом.
Databricks Runtime 11.0 и 11.0 ML — общедоступные версии; 11.0 Photon — общедоступная предварительная версия
16 июня 2022 г.
Databricks Runtime ML 11.0 и Databricks Runtime ML 11.0 теперь являются общедоступными. Databricks Runtime 11.0 Photon предоставляется в общедоступной предварительной версии
См. статью Databricks Runtime 11.0 (EoS) и Databricks Runtime 11.0 для Машинное обучение (EoS).
Изменение рабочего каталога Repos по умолчанию в Databricks Runtime 11.0
16 июня 2022 г.
По умолчанию в качестве рабочего каталога Python для записных книжек в Repo используется каталог, содержащий записные книжки. Например, вместо /databricks/driver в качестве рабочего каталога по умолчанию используется /Workspace/Repos/<user>/<repo>/<path-to-notebook>. Это позволяет выполнять импорт и считывание из файлов в Repos, чтобы по умолчанию работать с кластерами Databricks Runtime 11.0.
Это также означает, что запись в текущий рабочий каталог завершится ошибкой Read-only filesystem. Если вы хотите продолжить запись в локальную файловую систему для кластера, записывайте данные в /tmp/<filename> или /databricks/driver/<filename>.
Databricks Runtime 10.1 — прекращение поддержки
14 июня 2022 г.
Поддержка Databricks Runtime 10.1 и Databricks Runtime 10.1 для Машинного обучения прекращена 14 июня. См. статью "Жизненные циклы поддержки Databricks".
Delta Live Tables теперь поддерживает SCD типа 2
13–21 июня 2022 г.: версия 3.74
Конвейеры Delta Live Tables теперь могут использовать SCD типа 2 для записи изменений исходных данных и сохранения полной истории обновлений записей. Это улучшает существующую поддержку разностных динамических таблиц для SCD типа 1. См. API APPLY CHANGES: упрощение захвата данных об изменениях с помощью Delta Live Tables.
Создание конвейеров Delta Live Tables непосредственно в пользовательском интерфейсе Azure Databricks
13–21 июня 2022 г.: версия 3.74
Теперь можно создать конвейер Delta Live Tables из меню "Создание" на боковой панели пользовательского интерфейса Azure Databricks.
Выберите канал Delta Live Tables при создании или изменении конвейера
13–21 июня 2022 г.: версия 3.74
Теперь вы можете настроить канал для вашего конвейера Delta Live Tables с помощью диалогов "Создание конвейера" и "Редактирование параметров конвейера" . Ранее для настройки канала требовалось изменить параметры в конфигурации JSON конвейера.
Обмен данными между задачами в заданиях Azure Databricks, используя значения задач
13 июня 2022 г.
Теперь вы можете обмениваться значениями между задачами в заданиях Azure Databricks, используя значения задач . Например, можно использовать значения задач для передачи выходных данных модели машинного обучения последующим шагам в той же сессии выполнения. См. раздел Служебная подпрограмма taskValues (dbutils.jobs.taskValues).
Включение переключения учетных записей в пользовательском интерфейсе Databricks
8 июня 2022 г.
Если пользователи принадлежат нескольким учетным записям, теперь они могут переключаться между учетными записями в пользовательском интерфейсе Databricks. Чтобы использовать переключатель учетных записей, щелкните адрес электронной почты в верхней части пользовательского интерфейса Databricks, а затем наведите указатель мыши на учетную запись Switch. Затем выберите учетную запись, к которой вы хотите перейти.