Ноябрь 2024 г.
Эти функции и улучшения платформы Azure Databricks были выпущены в ноябре 2024 года.
Примечание.
Выпуски являются поэтапными. Ваша учетная запись Azure Databricks может быть обновлена только через неделю или более после первоначальной даты выпуска.
Дополнительные метаданные для подсказки таблицы в записных книжках
25 ноября 2024 г.
При наведении указателя мыши на имя таблицы каталога Unity в ячейке записной книжки подсказка теперь содержит следующие метаданные:
- Владелец
- Последнее обновление
- Размер
- Описание
- Ссылка для просмотра таблицы на боковой панели обозревателя каталогов
Автоматическое обновление кластера и расширенный пользовательский интерфейс безопасности и соответствия общедоступным
19 ноября 2024 г.
Автоматическое обновление кластера теперь общедоступно. Автоматическое обновление кластера гарантирует, что все кластеры в рабочей области периодически обновляются до последних обновлений образа ОС узла и системы безопасности. Возможность включения расширенных функций безопасности и соответствия требованиям из консоли учетной записи теперь также общедоступна. См. автоматическое обновление кластера и настройка параметров повышенной безопасности и соответствия требованиям.
Расширенная поддержка отладчика Python в записных книжках
18 ноября 2024 г.
Встроенный отладчик Python в записных книжках Databricks теперь поддерживается для бессерверных вычислений и вычислений, настроенных с общим режимом доступа в Databricks Runtime 14.3 LTS или более поздней версии. Дополнительные сведения об отладчике см. в статье "Отладка записных книжек".
Улучшенный интерфейс веб-терминала
18 ноября 2024 г.
Databricks сделал следующие улучшения в интерфейсе веб-терминала:
- Поддержка файлов конфигурации. Теперь вы можете задать постоянные конфигурации для веб-терминала Databricks с файлами конфигурации .bashrc. См. Настройте ваш веб-терминал.
- Журнал истории команд: Теперь можно просматривать команды, выполненные в предыдущих сеансах, с помощью клавиш со стрелками вверх и вниз. Это упрощает восстановление и повторное использование предыдущих команд без их повторного ввода.
- Поддержка общего кластера. Улучшенный веб-терминал доступен в общих кластерах в Databricks Runtime 15.1 и более поздних версиях.
Дополнительные сведения об использовании веб-терминала см. в статье Запуск команд оболочки в веб-терминале Azure Databricks.
Поддержка истории запросов и профиля запросов для Delta Live Tables
15 ноября 2024 г.
Azure Databricks теперь предлагает улучшенные средства для мониторинга производительности запросов в конвейерах Delta Live Tables. См. историю запросов доступа для конвейеров Delta Live Tables.
Ребренд обучения модели мозаичного искусственного интеллекта
15 ноября 2024 г.
Обучение модели ИИ для мозаики было перебрано для охвата существующих функций:
- Базовая настройка модели, ранее известная как Обучение модели Мозаичного ИИ, продолжает предлагать расширенную настройку для базовых моделей.
- Теперь функции AutoML можно получить из раздела "Эксперименты ".
Повторное использование выходных данных SQL в _sqldf последующих ячейках SQL
15 ноября 2024 г.
В Databricks Runtime 14.3 и более поздних версиях выполнение SQL-запроса в записной книжке Databricks создает неявный кадр данных (_sqldf), который можно использовать в подчиненных ячейках SQL. Это добавляет в поддержку использования переменной _sqldf в ячейках Python, представленных в Databricks Runtime 13.3. Просмотрите результаты ячейки SQL.
Частное подключение из бессерверной поддержки вычислений для управляемых Azure ресурсов
15 ноября 2024 г.
Теперь все управляемые Azure ресурсы с поддержкой собственной частной конечной точки поддерживаются из бессерверных вычислений. Эта функция общедоступна. См. раздел "Настройка частного подключения из бессерверных вычислений".
Поддержка частного подключения для заданий, записных книжек и Delta Live Tables
15 ноября 2024 г.
Частное подключение для бессерверных вычислений теперь поддерживает задания, записные книжки и рабочие нагрузки Delta Live Tables. Эта функция общедоступна. См. раздел "Настройка частного подключения из бессерверных вычислений".
Теперь доступна системная таблица складов (общедоступная предварительная версия)
15 ноября 2024 г.
Таблица system.compute.warehouses записывает конфигурации хранилища SQL. Каждая строка — это моментальный снимок свойств хранилища SQL в определенный момент времени. При изменении свойств создается новый моментальный снимок. См. справочникпо системным таблицам
Общий доступ к межплатформенным представлениям (общедоступная предварительная версия)
14 ноября 2024 г.
Получатели Databricks теперь могут запрашивать общие представления с помощью любого вычислительного ресурса Databricks. Ранее, если учетная запись Azure Databricks получателя отличается от учетной записи поставщика, получатели могут запрашивать только общее представление с помощью бессерверного хранилища SQL. См. общих представлений чтения.
Просмотр общего доступа также расширяется для открытия соединителей общего доступа. См. раздел Чтение данных, предоставленных с помощью открытого обмена Delta Sharing (для получателей).
Общедоступная предварительная версия "Чистые комнаты" отключена с новыми функциями
13 ноября 2024 г.
Databricks Clean Rooms использует Delta Sharing и бессерверные вычисления для обеспечения безопасной среды, защищающей конфиденциальность, в которой несколько сторон могут совместно использовать конфиденциальные корпоративные данные и работать вместе без прямого доступа к данным друг друга. Общедоступная предварительная версия "Чистые комнаты" теперь открыта для всех клиентов в Azure и AWS и включает следующие новые функции:
выходные таблицы являются временными таблицами только для чтения, генерируемыми запуском записной книжки и переданными в хранилище метаданных Unity Catalog запускающего записную книжку.
Выходные таблицы можно создавать или читать совместно в Azure, AWS и Google Cloud, но они поддерживаются только в том случае, если центральная чистая комната размещена в AWS.
Типы задач записной книжки "Чистая комната" позволяют запускать записные книжки Azure Databricks в чистом помещении в рамках рабочего процесса. Помимо поддержки значений задач и выходных таблиц, это мощный инструмент для выполнения сложных рабочих потоков на данных, общих для чистых комнат.
Бессерверное управление исходящим трафиком позволяет ограничить доступ из центральных серверных к интернет-адресам, которые вы указываете.
Узнайте , что такое Чистые комнаты Azure Databricks?.
Databricks Runtime 16.0 — общедоступная версия
11 ноября 2024 г.
Databricks Runtime 16.0 и Databricks Runtime 16.0 ML теперь общедоступны.
Сведения о Машинное обучение см. в Databricks Runtime 16.0 и Databricks Runtime 16.0.
Критическое изменение: размещенное RStudio является окончанием жизни
11 ноября 2024 г.
В Databricks Runtime 16.0 и более поздних версий сервер Databricks, размещенный на RStudio, является конечным и недоступным в любой рабочей области Azure Databricks. Чтобы узнать больше и ознакомиться со списком альтернатив RStudio, перейдите в раздел о выводе из эксплуатации размещённого RStudio Server .
Прогнозная оптимизация включена для всех новых учетных записей Azure Databricks
11 ноября 2024 г.
11 ноября Databricks включил прогнозную оптимизацию в качестве значения по умолчанию для всех новых учетных записей Azure Databricks. Ранее она была отключена по умолчанию и может быть включена с помощью учетной записи администратора. Если включена прогнозная оптимизация, Azure Databricks автоматически выполняет операции обслуживания для управляемых таблиц каталога Unity. Дополнительные сведения о предиктивной оптимизации см. в предиктивной оптимизации для управляемых таблиц каталога Unity.
Обновленные и унифицированные блоки кода только для чтения
8 ноября 2024 г.
Новый блок кода только для чтения теперь доступен в обозревателе каталогов, на странице оповещений и Genie.
Расширенные рекомендации по быстрому исправлению
8 ноября 2024 г.
Теперь помощник по Databricks идентифицирует и предлагает исправления для более широкого спектра распространенных ошибок SQL и Python. При увеличении обнаружения ошибок на 50% быстрое исправление поможет вам быстрее отлаживать код. См . краткое исправление.
API-интерфейсы модели Foundation Для оплаты за маркер, доступные во всех поддерживаемых регионах, поддерживаемых моделью
7 ноября 2024 г.
API моделей Foundation с оплатой за токены теперь поддерживают рабочие нагрузки во всех регионах, где доступна служба обслуживания моделей ИИ Mosaic. Если рабочая область находится в регионе обслуживания моделей, но не в регионе США или ЕС, ваша рабочая область должна быть включена для обработки данных между регионами. При включенной рабочей нагрузке по маркеру оплаты направляется в США. Databricks Geo.
Управляемый каталогом Unity доступ к внешним облачным службам с помощью учетных данных службы (общедоступная предварительная версия)
7 ноября 2024 г.
Учетные данные службы обеспечивают простую и безопасную аутентификацию с вашими службами облачного арендатора с использованием управляемых удостоверений Azure (MI) и каталога Unity. Учетные данные службы доступны в общедоступной предварительной версии и поддерживаются в Databricks Runtime 15.4 LTS и выше. См. Управление доступом к внешним облачным службам с помощью учетных данных службы.
Контроль соответствия требованиям Uk Cyber Essentials Plus
7 ноября 2024 г.
Средства контроля соответствия требованиям Uk Cyber Essentials Plus (UKCE+) предоставляют усовершенствования, которые помогут вам обеспечить соответствие рабочей области. UKCE+ — это сертификация, созданная правительством Великобритании для упрощения и стандартизации ит-практики безопасности для коммерческих организаций, взаимодействующих с данными правительства Великобритании. Ознакомьтесь с элементами управления соответствиями Uk Cyber Essentials Plus.
Частное подключение от бессерверной поддержки вычислений для обслуживания моделей
5 ноября 2024 г.
Частное подключение из бессерверных вычислений с помощью Приватный канал Azure теперь поддерживается для обслуживания моделей. Это включает поддержку конечных точек пользовательской модели и подготовленных конечных точек пропускной способности. См. раздел "Настройка частного подключения из бессерверных вычислений".
Поддержка серии Databricks Runtime 14.2 заканчивается
5 ноября 2024 г.
Поддержка Databricks Runtime 14.2 и Databricks Runtime 14.2 для Машинное обучение закончилась 5 ноября. См. статью "Жизненные циклы поддержки Databricks".