Поделиться через

Март 2022 г.

  • Статья

Эти функции и доработки платформы Azure Databricks были выпущены в марте 2022 г.

Примечание.

Выпуски являются поэтапными. Ваша учетная запись Azure Databricks может быть обновлена только через неделю или более после первоначальной даты выпуска.

Улучшенная производительность и стоимость конвейеров DLT с помощью Databricks с расширенным автомасштабированием

31 марта 2022 г.

Расширенное автомасштабирование Databricks улучшает существующую функциональность автомасштабирования кластера, добавив оптимизацию потоковой нагрузки и улучшенную поддержку для пакетных рабочих нагрузок. Усовершенствованные улучшения автомасштабирования обеспечивают более эффективное использование кластера, сокращение использования ресурсов и снижение затрат. См. раздел Оптимизация использования кластеров конвейеров DLT с расширенным автомасштабированием.

Файлы в Repos включены по умолчанию в новых рабочих областях

30 марта 2022 г.

Функция Файлы в Repos теперь включена по умолчанию в создаваемых рабочих областях.

Хранилище компонентов Databricks теперь находится в общедоступной версии

22 марта 2022 г.

Хранилище функций Databricks теперь доступно для всех. Хранилище признаков Databricks обеспечивает обнаружение признаков в вашей организации и общий доступ к ним, а также гарантирует, что для обучения моделей и вывода используется согласованный код вычисления признаков.

Поделиться экспериментом со страницы экспериментов

21–28 марта 2022 г.: версия 3.68

Кнопка Разрешения на странице эксперимента MLflow была переименована в Поделиться. В диалоговом окне теперь есть ссылка на эксперимент, которой можно делиться. См. Изменение разрешений для эксперимента.

Исправлена ошибка RStudio Workbench

21–28 марта 2022 г.: версия 3.68

Последняя версия RStudio Workbench зависит от файлов cookie при использовании файла лицензии. Эти файлы cookie не были добавлены в список разрешений для использования прокси-сервера. Теперь эта проблема устранена.

Новые параметры языка рабочей области

21 марта 2022 г.

Теперь рабочие области доступны на следующих языках:

  • Español
  • Português (Brasil)

Общедоступная версия Databricks Runtime 10.4 LTS и 10.4 LTS ML, общедоступная предварительная версия 10.4 LTS Photon

18 марта 2022 г.

Databricks Runtime 10.4 LTS и Databricks Runtime 10.4 LTS ML теперь общедоступны. Databricks Runtime 10.4 Photon — в общедоступной предварительной версии.

Примечание.

LTS означает, что эта версия находится в долгосрочной поддержке. См. жизненный цикл версии LTS среды выполнения Databricks.

См. Databricks Runtime 10.4 LTS и Databricks Runtime 10.4 LTS для Машинного обучения.

Каталог Unity доступен в общедоступной предварительной версии

10 марта 2022 г.

Каталог Unity (предварительная версия) — это решение для детализированного управления данными и ИИ в архитектуре lakehouse Databricks.

Каталог Unity помогает упростить безопасность и управление данными со следующими ключевыми функциями:

  • Определите один раз, обезопасьте везде: Unity Catalog предоставляет единое место для управления политиками доступа к данным, которые применяются ко всем рабочим областям и ролям.
  • Модель безопасности, совместимая со стандартами: Модель безопасности Unity Catalog основана на стандартном ANSI SQL и позволяет администраторам предоставлять разрешения на уровне каталогов, баз данных (также называемых схемами), таблиц и представлений в существующем хранилище данных с использованием знакомого синтаксиса.
  • встроенный аудит: Каталог Unity автоматически ведёт журналы аудита уровня пользователя, фиксирующие доступ к вашим данным.

Вы можете получить доступ к данным в каталоге Unity таким же образом, как к локальным данным в рабочей области: из кластера по науке о данных и инженерии или "Databricks Mosaic AI", хранилища SQL, редактора Databricks SQL или используя REST API каталога Unity или интерфейс командной строки каталога Unity (CLI).

Дополнительные сведения см. в разделе Что такое каталог Unity?. Чтобы принять участие в общедоступной предварительной версии каталога Unity, обратитесь к группе учетной записи Azure Databricks.

Общедоступная предварительная версия Delta Sharing

10 марта 2022 г.

Delta Sharing (предварительная версия) — это открытый протокол, разработанный Databricks для безопасного обмена данными с другими организациями независимо от того, какие платформы вычислений они используют. Пользователь Databricks, называемый "поставщиком данных", может использовать Delta Sharing для совместного использования данных в хранилище метаданных каталога Unity с человеком или группой за пределами своей организации, называемой "получателем данных". Получатели данных могут немедленно начать работу с последней версией общих данных. Полный список соединителей и сведения об их использовании см. в документации по проекту Delta Share. Когда Delta Sharing включен в метахранилище Unity Catalog, он запускает сервер Delta Sharing.

Дополнительные сведения см. в разделе What is Delta Sharing?. Чтобы принять участие в общедоступной предварительной версии Delta Share, обратитесь к группе учетных записей Azure Databricks.

Изменение ключа, управляемого клиентом, для служб, которыми управляют

10 марта 2022 г.

Вы можете добавить ключ, управляемый клиентом (CMK), для управляемых служб. Azure Databricks использует ваш ключ для защиты и контроля доступа к ключу, который шифрует данные на уровне управления для источников записной книжки, секретов и истории запросов Databricks SQL. Эта функция предоставляется в режиме общедоступной предварительной версии.

Теперь можно повернуть (обновить) ключ.

Расширенный контроль доступа для конвейеров DLT

9 марта 2022 г.

Теперь у вас есть более широкий контроль над доступом к конвейерам DLT, включая владельца конвейера, который может просматривать конвейер или управлять ими и кто может запустить конвейер. См. ACL-списки конвейера DLT.

Тестирование функций предварительной версии DLT с помощью нового параметра channel (общедоступная предварительная версия)

7–14 марта 2022 г.: версия 3.67

Вы можете протестировать предстоящие функции в конвейерах DLT с помощью нового параметра channel. Чтобы протестировать конвейер с новыми функциями, установите для channel значение preview. Чтобы вернуться к текущему выпуску, задайте для channel значение current.

Улучшена обработка ошибок для функций Python DLT (общедоступная предварительная версия)

7–14 марта 2022 г.: версия 3.67

Этот выпуск добавляет проверку типов, чтобы подтвердить, что функции Python DLT используют тип данных string при задании имен и значений для свойств таблицы . Ранее установка свойств таблицы с использованием нестроковых значений может привести к сбою конвейера без сообщения об ошибке, указывающего основную причину.

Обновления в Databricks Repos

7–14 марта 2022 г.: версия 3.67

Следующие улучшения внесены в Databricks Repos.

  • Поиск и замена текста в файлах в репозиториях. Редактор файлов теперь содержит меню Файл и Правка, которое предоставляет возможности поиска, замены и весь функционал.
  • Согласно прежней рекомендации Databricks, общее число записных книжек и файлов в репозитории не должно было превышать 2 000. Это ограничение увеличилось до 5000.

Ведение журнала диагностических данных об изменениях в политике кластера

7–14 марта 2022 г.: версия 3.67

Если ведение журнала аудита включено, событие аудита регистрируется при создании, обновлении или удалении политики кластера или при обновлении разрешений пользователей для политики кластера. Для получения дополнительной информации см. справочник по журналу диагностики.

Databricks Runtime 10.4 (бета-версия)

4 марта 2022 г.

Databricks Runtime 10.4, 10.4 Photon и 10.4 ML теперь доступны в виде бета-версий.

Ознакомьтесь с полным текстом заметок о выпуске Databricks Runtime 10.4 LTS и Databricks Runtime 10.4 LTS для машинного обучения.