Заметки о выпуске платформы Azure Databricks
-
января 2025 г.
- улучшения выходных данных для записной книжки
- более быстрая загрузка записной книжки
- Записные книжки теперь поддерживаются как файлы рабочей области
- Ноутбуки: журнал чата Databricks Assistant доступен только пользователю, который инициирует его
- сбор статистики теперь автоматизирован с помощью прогнозной оптимизации
- Обновление интерфейса Databricks Marketplace и Partner Connect
- драйвер JDBC Databricks 2.7.1
- Федерация Lakehouse поддерживает Teradata (общедоступная предварительная версия)
- выпуск databricks-agents SDK 0.14.0: настраиваемые метрики для оценки
- шлюз ИИ теперь поддерживает выделенную пропускную способность (публичная предварительная версия)
- поддержка серии Databricks Runtime 15.2 прекращается
- поддержка серии Databricks Runtime 15.3 заканчивается
- Завершение использования семейств моделей Meta Llama 2, 3 и Code Llama по настройке базовых моделей
-
Декабря 2024 г.
- Databricks Runtime 16.1 — ga
- Формат по умолчанию для новых записных книжек теперь имеет формат IPYNB (Jupyter)
- модели, размещенные в Databricks для Databricks Assistant, доступны в общедоступной предварительной версии
- интерпретатор кода Python для агентов ИИ (общедоступная предварительная версия)
- выпуск пакета SDK databricks-agents версии 0.13.0
- Внешние группы теперь помечены и неизменяемы
-
vector_search
теперь поддерживает векторные входные данные -
Укажите форматы ответов для
ai_query
- Тестируйте чистые комнаты с участниками совместной работы в одном хранилище метаданных
- назначение вычислительных ресурсов группам (общедоступная предварительная версия)
- Делегировать возможность создания учетных данных для хранения в Unity Catalog служебному субъекту
- Версия 2.2 API заданий выпущена
-
привилегия каталога Unity
MANAGE
(общедоступная предварительная версия) - Meta Llama 3.3 теперь доступна для заданных по пропускной способности рабочих нагрузок
- Просмотр метрик потоковых рабочих нагрузок для запусков задач (общедоступная бета-версия)
- просмотр метрик потоковой рабочей нагрузки для обновлений конвейера Delta Live Tables (общедоступная предварительная версия)
- Федерация Lakehouse поддерживает Oracle (общедоступную предварительную версию)
- Databricks Runtime 16.1 (бета-версия)
- Управление бессерверными исходящими сетевыми подключениями с помощью контроля исходящего трафика
- таблица системных событий доступа к сети теперь доступна (общедоступная предварительная версия)
- Отслеживать и отзывать персональные токены доступа в вашем аккаунте (приватная предварительная версия)
- Unity Catalog может взаимодействовать с метахранилищами Hive
- Удаление хранилища метаданных для применения изоляции хранилища на уровне каталога
- Мета Ллома 3.3 70B Instruct теперь доступен в службе обслуживания моделей
- bamboolib на данный момент устарел
- Упрощение оценки агента ИИ с помощью синтетических наборов оценки
- Улучшение производительности таблицы Databricks to Databricks Delta Sharing с помощью общего доступа к журналу (общедоступная предварительная версия)
- максимальное время существования маркера личного доступа в настоящее время составляет 730 дней (два года)
- Обучение модели ИИ для мозаики — бессерверное прогнозирование (общедоступная предварительная версия)
- добавление политик бюджета в модель конечных точек обслуживания
-
Ноябрь 2024 г.
- дополнительные метаданные для подсказки таблицы в записных книжках
- Автоматическое обновление кластера и расширенный пользовательский интерфейс безопасности и соответствия теперь доступны для общего пользования
- Расширенная поддержка отладчика Python в записных книжках
- Улучшенный интерфейс веб-терминала
- поддержка журнала запросов и профилей запросов для Delta Live Tables
- Ребренд обучения модели мозаичного искусственного интеллекта
-
Повторное использование выходных данных SQL в
_sqldf
последующих ячейках SQL - Частное подключение из бессерверной поддержки вычислений для управляемых Azure ресурсов
- поддержка приватного подключения для задач, записных книжек и Delta Live Tables
- системная таблица хранилища теперь доступна (общедоступная предварительная версия)
- Общий доступ к межплатформенным представлениям (общедоступная предварительная версия)
- Общедоступная предварительная версия "Чистые комнаты" отключена с новыми функциями
- Databricks Runtime 16.0 — общедоступная версия
- Критическое изменение: размещенное RStudio является окончанием жизни
- Прогнозная оптимизация включена для всех новых учетных записей Azure Databricks
- Обновленные и унифицированные блоки кода только для чтения
- Расширенные рекомендации по быстрому исправлению
- API-интерфейсы модели Foundation Для оплаты за маркер, доступные во всех поддерживаемых регионах, поддерживаемых моделью
- доступ к внешним облачным службам, управляемым каталогом Unity, с помощью учетных данных службы (общедоступная предварительная версия)
- Контроль соответствия требованиям Uk Cyber Essentials Plus
- Частное подключение от бессерверной поддержки вычислений для обслуживания моделей
- Поддержка серии Databricks Runtime 14.2 заканчивается
-
Октябрь 2024 г.
- Включение более точного контроля доступа для отдельных пользователей
- Помощник Databricks помогает оптимизировать запросы SQL
- Поддержка серии Databricks Runtime 15.1 заканчивается
- Ллома 2 70B Чат модель выхода на пенсию в API-интерфейсах модели Foundation за токен
- Включение автоматического назначения хранилища метаданных новым рабочим областям
- Структурированные выходные данные, поддерживаемые в службе модели ИИ Мозаики (общедоступная предварительная версия)
- Более точное управление доступом для отдельных пользователей, как правило, доступно
- Функции ИИ теперь доступны в регионах ЕС
- Использование бессерверных атрибутов с политиками бюджета (общедоступная предварительная версия)
- Бессерверные вычисления автоматически включены в соответствующих учетных записях
- Автозавершение помощника Databricks теперь общедоступен
- Фильтры в таблицах результатов ноутбука теперь сохраняются
- Улучшения комментариев в записных книжках
- Databricks Runtime 16.0 (бета-версия)
- Служба модели ИИ мозаики теперь поддерживает пакетное вывод
- Создание безопасных данных и приложений ИИ для пользователей с помощью Приложений Databricks (общедоступная предварительная версия)
-
Более надежная перезагрузка измененных модулей Python с улучшениями
autoreload
- Упрощение соединителя приема Salesforce
- Бессерверные вычисления теперь доступны в дополнительных регионах
-
Сентябрь 2024 г.
- Meta Llama 3.1 405B Instruct now supported on Databricks Function Calling
-
vector_search()
теперь доступно всем клиентам (общедоступная предварительная версия) - Модели Meta Llama 3.2 3B и 1B поддерживаются в модели service
- Модели Meta Llama 3.2 3B и 1B поддерживаются в тонкой настройке модели Foundation
- Публикация в Power BI теперь общедоступна
-
Использование
@
для ссылки на таблицы в Помощнике Databricks запрашивает - Прототип и экспорт агентов GenAI в игровой площадке искусственного интеллекта
-
Управление внешним доступом к данным в каталоге Unity с помощью новых привилегий
EXTERNAL USE SCHEMA
- Модели внедрения GTE версии 1.5 (английский) теперь поддерживаются в подготовленной пропускной способности API модели Foundation
- Встроенный код для быстрого исправления Databricks
- Создание бюджетов для мониторинга расходов на счет (общедоступная предварительная версия)
- Предварительная настройка модели Foundation теперь доступна всем клиентам (общедоступная предварительная версия)
- Теперь шлюз искусственного интеллекта — общедоступная предварительная версия
- Модели Meta Llama 3.1 70B и 8B, поддерживаемые в тонкой настройке модели Foundation
- Поддержка расширенных комментариев, созданных ИИ
- Контролируйте использование чистых помещений в таблице оплачиваемого использования
- Расширение Databricks для Visual Studio Code — общедоступная версия
- Вызов функций теперь поддерживается в API-интерфейсах модели Foundation, подготовленных для пропускной способности
- Системные таблицы теперь общедоступны
-
Август 2024 г.
- Мониторинг использования объектов каталога Unity в соответствии с квотами с помощью новых API для квот ресурсов
- Инструкции mpT 7B и mpT 30B Instruct model retirements
- AskSupport заменен помощником по Azure Databricks
- Панель мониторинга управления затратами, добавленная в консоль учетной записи (общедоступная предварительная версия)
- системные таблицы Lakeflow расширяются с помощью дополнительных столбцов
- Выделение ошибок форматирования кода Python
- Разностный общий доступ: дополнительные функции Delta Lake теперь поддерживаются соединителями Python и Power BI.
- Delta Sharing добавляет поддержку TimestampNTZ
-
Задача "Задания
For each
Azure Databricks" — это общедоступная версия - Разрешение Azure RBAC для администраторов рабочей области
- Databricks Runtime 15.4 LTS — общедоступная версия
- Персонализированная автоматическая компиляция записной книжки
- Символические ссылки теперь поддерживаются в файлах рабочей области
- Настройка режима доступа рабочей области по умолчанию для вычислений заданий
- Новые команды косой черты для помощника по Databricks
- Поиск рабочей области теперь поддерживает объемы данных
- Модели Meta Llama 3.1 405B, поддерживаемые в тонкой настройке модели Foundation
- Драйвер JDBC Databricks 2.6.40
- Маркеры личного доступа Databricks отозваны, если не используется через 90 дней
- API кластеров теперь поддерживает частичные обновления конфигурации
- Перенос строк в ячейки записной книжки
- Укажите столбцы для синхронизации для Mosaic AI «Поиск векторов»
- Файлы больше не могут иметь идентичные имена в папках рабочей области
- Теперь доступно применение политик вычислений
- API-интерфейсы модели Foundation для оплаты за токен теперь являются общедоступной версии
- Совместная работа над проектами данных безопасно и частно с помощью чистых комнат Databricks (общедоступная предварительная версия)
- Поиск вектора вектора мозаики теперь соответствует HIPAA
- Форматирование столбцов в таблицах результатов записных книжек и запросов
- Фильтры строк и маски столбцов теперь общедоступны и улучшены
- Федерация Lakehouse общедоступна (GA)
-
Июль 2024 г.
- Увеличенное ограничение для одновременных задач
- Внедрение и перетаскивание изображений в записные книжки
- Палитра команд, доступная в записных книжках
-
схема системы рабочего процесса, переименованная в
lakeflow
- LakeFlow Connect (доступная общедоступная предварительная версия)
- Поддержка хранилища Cloudflare R2 — общедоступная версия
- Мониторинг действий Помощника Databricks при помощи системных таблиц (публичная предварительная версия)
- Общий доступ к схемам с помощью разностного общего доступа теперь является общедоступной
-
Платформа агента ИИ мозаики доступна в
northcentral
иcentralus
- Помощник Databricks может диагностировать проблемы с заданиями (общедоступная предварительная версия)
- Обновления для проверки подлинности и общего доступа к папкам Databricks Git
- Время ожидания установки библиотеки кластера
- Исходящие IP-адреса вычислительной плоскости необходимо добавить в список разрешенных IP-адресов рабочей области
- Расширенная поддержка databricks Runtime 9.1
- Единый вход поддерживается в Федерации Lakehouse для SQL Server
- Общий доступ к модели с помощью delta Sharing теперь общедоступен
- Совместное использование комментариев и ограничений первичного ключа с помощью разностного общего доступа
- New Databricks JDBC Driver (OSS)
- Databricks Runtime 15.4 LTS (бета-версия)
- Scala — это общедоступная версия в общем вычислительном каталога Unity
- Пользовательские вычислительные системы поддерживают точное управление доступом, материализованные представления и потоковые таблицы
- Системная таблица таймлайна узла теперь стала доступна (предварительная версия, общедоступная)
- Мета Ллома 3.1 теперь поддерживается в службе "Обслуживание моделей"
- Записные книжки: переключение более видимых названий ячеек
-
/
в именах ресурсов рабочей области не рекомендуется - Delta Sharing позволяет делиться таблицами, использующими жидкое кластеризование
- системная таблица журнала запросов теперь доступна (общедоступная предварительная версия)
- Отчеты проверки уязвимостей теперь отправляются администраторам
- Логирование метаданных разделов для внешних таблиц каталога Unity
- Бессерверные вычисления для рабочих процессов — общедоступная версия
- Бессерверные вычисления для записных книжек — это общедоступная версия
- Databricks Connect для Python теперь поддерживает бессерверные вычисления
- Фильтрация выходных данных с помощью запросов естественного языка
- Поддержка секретов обычного текста для внешних моделей
-
Прогнозирование данных временных рядов с помощью
ai_forecast()
- Поддержка задач SQL для файлов с несколькими инструкциями SQL-запросов — это общедоступная версия
- Федерация Lakehouse поддерживает Облако данных Salesforce (общедоступная предварительная версия)
- системная таблица Databricks Assistant теперь доступна (общедоступная предварительная версия)
- API SCIM учетной записи версии 2.1 (общедоступная предварительная версия)
- увеличение квоты ресурсов для таблиц на хранилище метаданных каталога Unity
- Помощник databricks может автоматически диагностировать ошибки записной книжки
-
Поддержка синтаксиса
:param
с задачей SQL-файла — общедоступная версия
-
Июнь 2024 г.
- Записные книжки — выделение синтаксиса вне порядка
- Помощник по записным книжкам автоматически диагностировать ошибки
- Улучшения обозревателя каталогов
- Обслуживание нескольких внешних моделей из одной конечной точки обслуживания модели
- Помощник по Databricks теперь является общедоступной
- Помощник по Databricks теперь предоставляет названия потокам
- Диспетчер среды бессерверных записных книжек
- Консоль отладки записных книжек
- Быстрое добавление периодического расписания в рабочий процесс Azure Databricks
- Databricks Runtime 15.3 — общедоступная версия
- География Azure — это общедоступная версия
- улучшенный пользовательский интерфейс создания каталога
- Обновления подсетей в конфигурациях сетевого подключения
- Таблицы системы выставления счетов включены по умолчанию
- Мониторинг Lakehouse — это общедоступная версия
- Общий доступ к томам с помощью разностного общего доступа теперь общедоступен
- Управляемые клиентом ключи (CMK) для векторного поиска Databricks теперь являются общедоступной версии
- Платформа агента ИИ Мозаики (общедоступная предварительная версия)
- Прогнозная оптимизация теперь является общедоступной
- Оптимизация маршрутов доступна для обслуживания конечных точек
- Поддержка обслуживания моделей с брандмауэром учетной записи хранения рабочей области
- Сопоставление столбцов теперь доступно для всех
- системные таблицы рабочих процессов теперь доступны (общедоступная предварительная версия)
- Вызов функции — общедоступная предварительная версия
-
Запрос индекса векторного поиска с помощью
vector_search()
- Поиск вектора вектора мозаики теперь поддерживает гибридный поиск
- GTE теперь поддерживается в службе обслуживания моделей
- Помощник по Databricks: потоки и запросы, включенные по умолчанию
- Улучшенный редактор записной книжки Markdown
- Быстрый доступ к таблицам Обозревателя каталогов из блокнотов
- Драйвер ODBC Databricks 2.8.2
- Новый пользовательский интерфейс Записной книжки Databricks теперь общедоступен
-
Май 2024 г.
- Конфигурация бессерверного брандмауэра теперь поддерживает дополнительные типы вычислений
- Поддержка серии Databricks Runtime 15.0 заканчивается
- Databricks Runtime 15.3 (бета-версия)
- Пользовательский интерфейс метрики вычислений теперь доступен во всех версиях среды выполнения Databricks
- Улучшен поиск и фильтрация в таблицах результатов записной книжки и редактора SQL
- Новая панель мониторинга помогает продавцам Databricks Marketplace отслеживать популярность своих предложений
-
Просмотр системных федеративных запросов в
Query Profile
- Исходящие IP-адреса вычислительной плоскости необходимо добавить в список разрешенных IP-адресов рабочей области
- OAuth поддерживается в Федерации Lakehouse для Snowflake
- Массовое перемещение и удаление объектов рабочей области из браузера рабочей области
- объекты каталога Unity доступны в последних и избранных
- Новый соединитель dbt-databricks 1.8.0 принимает архитектуру dbt с развязанной базой данных
- Новые API соответствия и параметры безопасности (общедоступная предварительная версия)
- Databricks Runtime 15.2 — общедоступная версия
- Новый соединитель Tableau для разностного общего доступа
- Новые примеры модели рекомендаций для глубокого обучения
- Связывание данных учетных записей хранилища и внешних местоположений с определенными рабочими пространствами (публичная предварительная версия)
- Папки Git — это общедоступная версия
- предварительно обученные модели в каталоге Unity (общедоступная предварительная версия)
- Поиск вектора вектора для мозаики — это общедоступная версия
- Автозавершение помощника Databricks (общедоступная предварительная версия)
- Поддержка Meta Llama 3 в Обучении моделей Foundation
- Новые изменения в пользовательском интерфейсе папки Git
- Обучение модели Foundation (общедоступная предварительная версия)
- Разрешить пользователям копировать данные в буфер обмена из таблицы результатов
- значения тегов атрибутов для объектов каталога Unity теперь могут иметь длину 1000 символов (общедоступная предварительная версия)
- Страница "Новые предварительные версии"
- Новые возможности для поиска вектора вектора для мозаики ИИ
- Передача учетных данных и управление доступом к таблицам метахранилища Hive устарели и больше не поддерживаются
- Драйвер JDBC Databricks 2.6.38
- Поддержка брандмауэра для общедоступной версии учетной записи хранения рабочей области
- Databricks Runtime 15.2 (бета-версия)
- Ноутбуки теперь обнаруживают и автоматически заполняют имена столбцов для Spark Connect DataFrames
-
Апрель 2024 г.
- Databricks Runtime 15.1 — общедоступная версия
- Помощник по Databricks: Потоки и журнал
- Отмена ожидающих обновлений конечной точки обслуживания в службе моделей
- Meta Llama 3 теперь поддерживается в службе "Модель" для Azure
- Преемственность данных теперь фиксирует операции чтения в таблицах с масками столбцов и безопасностью на уровне строк
- Записные книжки теперь автоматически обнаруживают SQL
- Новые столбцы, добавленные в оплачиваемую системную таблицу использования (общедоступная предварительная версия)
- Delta Sharing поддерживает таблицы, использующие сопоставление столбцов (общедоступная предварительная версия)
- Получение схем конечных точек обслуживания (общедоступная предварительная версия)
- Создание и установка библиотек рабочей области больше не доступны
- Задания, созданные с помощью пользовательского интерфейса, теперь помещаются в очередь по умолчанию
- Настройка доступа к ресурсам из конечных точек обслуживания — это общедоступная версия
- Бессерверные вычисления для рабочих процессов доступны в общедоступной предварительной версии
- Lakehouse Federation поддерживает внешние таблицы с идентификаторами с учетом регистра
- Клонирование вычислений теперь клонирует все библиотеки, установленные на исходном вычислении
- Частное подключение из бессерверных вычислений — это общедоступная версия
- Интерфейс пользовательского интерфейса для регистрации приложения OAuth
- Улучшение опыта разработчиков при работе с записными книжками Delta Live Tables (общедоступная предварительная версия)
-
Март 2024 г.
- База DBRX и инструкции DBRX теперь доступны в службе моделей
- Служба моделей соответствует HIPAA во всех регионах
- Подготовленная пропускная способность в API модели Foundation соответствует требованиям GA и HIPAA.
- MLflow теперь применяет ограничения квоты для экспериментов и запусков
- Пользовательский интерфейс заданий обновляется для улучшения управления заданиями, развернутыми пакетами ресурсов Databricks
- Google Cloud Vertex AI поддерживается в качестве поставщика моделей для внешних моделей
- Отладка интерактивной записной книжки
- Самостоятельная регистрация для частных поставщиков биржевых услуг в Marketplace
- Databricks Runtime 15.0 — общедоступная версия
- Databricks Repos изменен на папки Git
- Расширенная поддержка databricks Runtime 14.1 и 14.2
- Драйвер ODBC Databricks 2.8.0
- Управление правилами частной конечной точки (общедоступная предварительная версия)
- Доступ к рабочей области для персонала Azure Databricks
- HIPAA теперь поддерживает бессерверные вычисления
- Хранилище SQL для записных книжек — общедоступная версия
- Делегировать возможность просмотра метаданных объекта в каталоге Unity (общедоступная предварительная версия)
- Новое ограничение для каждого региона для частных конечных точек
- Databricks Runtime 15.0 (бета-версия)
- Поддержка серии Databricks Runtime 14.0 заканчивается
- Новые вычисления для sys.path и CWD в Репозитории
- Обслуживание компонентов — общедоступная версия
- Прогнозная оптимизация доступна в других регионах
-
Февраль 2024 г.
- Используйте Delta Live Tables в создании признаков (общедоступная предварительная версия)
- адреса IPv4 источника для подключений PrivateLink в журналах аудита
- Ограничение изменения владельца задания и параметра запуска от имени
- Поддержка управляемых субъектов-служб Databricks
- Включить автоматическое обновление кластера (общедоступная предварительная версия)
- Администраторы могут включить расширенные функции безопасности и соответствия требованиям (общедоступная предварительная версия)
- Поддержка хранилища Cloudflare R2 для предотвращения исходящих сборов между регионами (общедоступная предварительная версия)
- Добавление пользовательского интерфейса данных поддерживает формат XML-файла
- Использование функций ИИ для вызова созданной модели ИИ из API-интерфейсов модели Foundation
- тома каталога Unity
- Полностраничный поиск на основе ИИ
- Выполнение заданий записной книжки SQL в хранилище SQL
- Триггеры прибытия файлов в заданиях Azure Databricks — это общедоступная версия
- Поиск моделей машинного обучения в Unity Catalog с помощью глобального поиска по рабочей области
- Прокси-сервер Databricks Git — это общедоступная версия
- Прокси-сервер Databricks Git больше не требует CAN_ATTACH_TO разрешений
- Поддержка файлов рабочей области для задач dbt и SQL-файлов — это общедоступная версия
- Databricks Connect — это общедоступная версия для Scala
- Создание таблиц из файлов в томах
- Databricks Runtime 14.3 LTS — это общедоступная версия
- Delta Sharing поддерживает таблицы, использующие векторы удаления (общедоступная предварительная версия)
-
Январь 2024 г.
- Поддержка формата собственного XML-файла (общедоступная предварительная версия)
- Совместное использование моделей ИИ с помощью Databricks Marketplace (общедоступная предварительная версия)
- Обновления правил группы безопасности сети
- Пути рабочей области обновление
- Поддержка брандмауэра служба хранилища Azure из бессерверных вычислений — общедоступная версия
- Упрощенное создание заданий Azure Databricks
- Мониторинг моделей GPU, обслуживающих рабочие нагрузки с помощью таблиц вывода
- Доступ к внешним томам каталога Unity на основе пути URI
- Списки элементов управления доступом можно включить в обновленных рабочих областях
- Marketplace с таблицей системных событий теперь доступна (общедоступная предварительная версия)
- Обновленный пользовательский интерфейс для ячеек записной книжки (общедоступная предварительная версия)
- Краткое исправление ошибок синтаксиса в записной книжке
- Databricks Runtime 14.3 LTS (бета-версия)
- Совместное использование моделей ИИ с помощью разностного общего доступа (общедоступная предварительная версия)
- Databricks Marketplace поддерживает общий доступ к томам
- Создание мини-приложений из пользовательского интерфейса Databricks
- системная таблица событий хранилища теперь доступна (общедоступная предварительная версия)
- размер файла рабочей области теперь составляет 500 МБ
- Уведомление об удалении компонентов для устаревшей интеграции Git в Databricks
- Драйвер ODBC Databricks 2.7.7
- Поддержка серии Databricks Runtime 13.2 заканчивается
- Вспомогательные функции ИИ включены по умолчанию
-
Декабрь 2023 г.
- Делитесь динамическими представлениями с помощью Delta Sharing (публичная предварительная версия)
- Совместное использование данных с помощью Delta Sharing (общедоступная предварительная версия)
- Схема связей сущностей для первичных ключей и внешних ключей
- Увеличение предела размера загружаемых файлов в каталоге Unity
- Доступны новые результаты отображения ячеек записной книжки (общедоступная предварительная версия)
- Доступные темы редактора записных книжек
- Поддержка внешних моделей в Службе моделей доступна в общедоступной предварительной версии
- Таблицы Databricks Online находятся в стадии общедоступного предварительного просмотра
- Пользовательский интерфейс параметров интеграции Repos и Git теперь правильно заметит поддержку GitHub Enterprise Server
- Драйвер JDBC Databricks 2.6.36
- Поддержка ссылок на файлы рабочей области из скриптов инициализации
- Функция и обслуживание функций — общедоступная предварительная версия
- API-интерфейсы модели Foundation — общедоступная предварительная версия
- Новый пользовательский интерфейс унифицированных параметров администратора
- Скрипты инициализации в DBFS являются конечными
- Устаревшие глобальные и именованные кластером скрипты инициализации являются завершенными
-
Ноябрь 2023 г.
- Поиск вектора мозаики — общедоступная предварительная версия
- Списки элементов управления доступом больше не могут быть отключены
- Новое поведение и действия в обозревателе каталогов для томов
- Databricks Runtime 14.2 — общедоступная версия
- Соединитель SQL Databricks для Python версии 3.0.0
- Библиотеки в файлах рабочей области, поддерживаемые в общих кластерах без изоляции
- Нерекомендуция библиотек рабочей области
- Поддержка типов виртуальных машин конфиденциальных вычислений Azure теперь общедоступна
- Поиск списков Databricks Marketplace с помощью поиска глобальной рабочей области
- Использование продуктов данных в Databricks Marketplace с помощью внешних платформ
- Поддержка бессерверных хранилищ SQL, добавленных для нескольких регионов Azure
- автоматическое включение каталога Unity для новых рабочих областей
- Databricks Runtime 14.2 (бета-версия)
- Databricks Marketplace включает акселераторы решений Databricks
- Федерация Lakehouse добавляет поддержку Google BigQuery
-
Октябрь 2023 г.
- Бессерверное безопасное подключение для Databricks SQL Serverless (общедоступная предварительная версия)
- Просмотр источника YAML для задания Azure Databricks
- Добавление условной логики в рабочие процессы Azure Databricks
- Настройте параметры в задании Azure Databricks, на которые могут ссылаться все задачи этого задания
- Векторы автоматического включения удаления
- поддержка каталога Unity для
UNDROP TABLE
является общедоступной - Partner Connect поддерживает Dataiku
- Созданные записные книжки AutoML теперь сохраняются как артефакты MLflow
- Новый регион: Центральная Катара
- тома каталога Unity , поддерживаемые брандмауэром Azure и приватным каналом
- Прогнозная оптимизация (общедоступная предварительная версия)
- таблицы вычислительной системы теперь доступны (общедоступная предварительная версия)
- Вычисление функций по запросу — общедоступная версия
- Инженерия признаков в каталоге Unity стала общедоступной
-
созданных ими табличных комментариев (общедоступная предварительная версия) - Модели в каталоге Unity — это ga
- Библиотеки теперь поддерживаются в политиках вычислений (общедоступная предварительная версия)
- Partner Connect поддерживает Монте Карло
- Семантический поиск (общедоступная предварительная версия)
- Включение помощника Databricks на уровне рабочей области
- Новые параметры фотона по умолчанию
- Databricks Runtime 14.1 — общедоступная версия
- заметки о выпуске Средства разработчика перемещены
- Расширение Databricks для Visual Studio Code обновлено до версии 1.1.5
- Прогнозный ввод-вывод для обновлений — это общедоступная версия
- Векторы удаления — общедоступная версия
- Partner Connect поддерживает RudderStack
- Интерфейс командной строки Databricks обновлен до версии 0.207.0 (общедоступная предварительная версия)
- Запуск выбранных ячеек в записной книжке
- Использовать привязку каталога рабочей области для предоставления доступа только для чтения к каталогу
- Расширение Databricks для Visual Studio Code обновлено до версии 1.1.4
- Пакет SDK Databricks для Python обновлен до версии 0.10.0 (бета-версия)
- Пакет SDK Databricks для Go обновлен до версии 0.22.0 (бета-версия)
- тома каталога Unity теперь в общедоступной предварительной версии для Azure в Китае
-
Сентябрь 2023 г.
- Федерация Lakehouse, доступная в кластерах отдельных пользователей
- Делегировать возможность создания данных доступа к хранилищу в Unity Catalog
- Databricks Runtime 14.1 (бета-версия)
- Модель GPU, оптимизированная для LLM в общедоступной предварительной версии
- Запрет выполнения задания пропускаться при достижении ограничений параллелизма
- Поставщик Databricks Terraform обновлен до версии 1.27.0
- Интерфейс командной строки Databricks обновлен до версии 0.206.0 (общедоступная предварительная версия)
- Пакет SDK Databricks для Go обновлен до версии 0.21.0 (бета-версия)
- Таблицы вывода для конечных точек развертывания моделей находятся в общедоступной предварительной версии
- Драйвер ODBC Databricks 2.7.5
- Расширение Databricks для Visual Studio Code обновлено до версии 1.1.3
- Выполнение заданий в качестве субъекта-службы — общедоступная версия
- Интерфейс командной строки Databricks обновлен до версии 0.205.2 (общедоступная предварительная версия)
- Интерфейс командной строки Databricks обновлен до версии 0.205.1 (общедоступная предварительная версия)
- Пакет SDK Databricks для Go обновлен до версии 0.20.0 (бета-версия)
- Пакет SDK Databricks для Python обновлен до версии 0.9.0 (бета-версия)
- Пакет SDK Databricks для Python обновлен до версии 0.7.1 (бета-версия)
- Поставщик Databricks Terraform обновлен до версии 1.26.0
- Databricks Connect для Databricks Runtime 14.0
- Панели мониторинга Lakeview в общедоступной предварительной версии
- Databricks Connect V2 — общедоступная предварительная версия для Scala
- Модель GPU, обслуживающаяся в общедоступной предварительной версии
- вычисление функций по запросу теперь доступно в каталоге Unity (общедоступная предварительная версия)
- Databricks Runtime 14.0 — общедоступная версия
- Обновление учетной записи Уведомления по электронной почте
- Поставщик Databricks Terraform обновлен до версии 1.25.1
- Пакет SDK Databricks для Go обновлен до версии 0.19.2 (бета-версия)
- Интерфейс командной строки Databricks обновлен до версии 0.205.0 (общедоступная предварительная версия)
-
Зарезервированное расположение для
/Workspace
- Пакеты активов Databricks (общедоступная предварительная версия)
- Поставщик Databricks Terraform обновлен до версии 1.25.0
- Расширение Databricks для Visual Studio Code обновлено до версии 1.1.2
- Partner Connect поддерживает Snowplow
- Интерфейс командной строки Databricks обновлен до версии 0.204.1 (общедоступная предварительная версия)
- Фильтровать конфиденциальные данные с помощью фильтров строк и маски столбцов (общедоступная предварительная версия)
- Системные таблицы теперь включают схему Marketplace (общедоступную предварительную версию)
- таблица системы ценообразования теперь доступна (общедоступная предварительная версия)
- Пакет SDK Databricks для Go обновлен до версии 0.19.1 (бета-версия)
- Драйвер ODBC Databricks 2.7.3
- Интерфейс командной строки Databricks обновлен до версии 0.204.0 (общедоступная предварительная версия)
- Обозреватель данных теперь является обозревателем каталогов
- Пакет SDK Databricks для Go обновлен до версии 0.19.0 (бета-версия)
- Пакет SDK Databricks для Python обновлен до версии 0.8.0 (бета-версия)
- Делегирование привилегий списка разрешений в каталоге Unity
- Интеграция приложений GitHub в Repos — это общедоступная версия
-
Август 2023 г.
- таблицы теперь отображаются в поисковом запросе по навигации
- Интерфейс командной строки Databricks обновлен до версии 0.203.3 (общедоступная предварительная версия)
- Драйвер JDBC Databricks 2.6.34
- Пакет SDK Databricks для Go обновлен до версии 0.18.0 (бета-версия)
- Пакет SDK Databricks для Python обновлен до версии 0.7.0 (бета-версия)
- Поставщик Databricks Terraform обновлен до версии 1.24.1
- Скрипты инициализации в DBFS, продленные до 1 декабря 2023 г.
- Databricks Runtime 14.0 (бета-версия)
- Единый интерфейс навигации — это общедоступная версия
- Поставщик Databricks Terraform обновлен до версии 1.24.0
- Параметр Databricks Runtime для Genomics удален из страницы параметров администратора рабочей области
- Параметры служб контейнеров, удаленные на странице параметров администратора рабочей области
- Интерфейс командной строки Databricks обновлен до версии 0.203.2 (общедоступная предварительная версия)
- Перейти к определению функций и переменных в записных книжках Python
- Databricks Runtime 13.3 LTS — это общедоступная версия
- Введение тегов в каталог Unity
- список разрешений для сценариев инициализации, JAR и Maven координат в общих кластерах каталога Unity находится в общедоступной предварительной версии
- поддержка томов для сценариев инициализации и JAR находится в общедоступной предварительной версии
- Упрощение фиксаций выходных данных файла Databricks Repos .ipynb
- Поддержка записной книжки IPYNB в Databricks Repos — это общедоступная версия
- Пакет SDK Databricks для Go обновлен до версии 0.17.0 (бета-версия)
- Пакет SDK Databricks для Python обновлен до версии 0.6.0 (бета-версия)
- Интерфейс командной строки Databricks обновлен до версии 0.203.1 (общедоступная предварительная версия)
- Браузер унифицированных схем теперь находится в стадии общей доступности
- Изменения бессерверной подсети могут повлиять на кодирование идентификаторов в скрипте или шаблоне.
- Пакет SDK Databricks для Go обновлен до версии 0.16.0 (бета-версия)
- Partner Connect поддерживает перепись
- Управляемые ключи HSM в Azure Key Vault теперь поддерживаются для ключей, управляемых клиентом.
- Пакет SDK Databricks для Python обновлен до версии 0.5.0 (бета-версия)
- Поддержка программной записи файлов рабочей области
- Интерфейс командной строки Databricks обновлен до версии 0.203.0 (общедоступная предварительная версия)
- Поставщик Databricks Terraform обновлен до версии 1.23.0
- Теперь группы можно переименовать
- Пакет SDK Databricks для Go обновлен до версии 0.15.0 (бета-версия)
- Пакет SDK Databricks для Python обновлен до версии 0.4.0 (бета-версия)
- Был удален сторонний параметр конфигурации защиты iFraming
- Расширение Databricks для Visual Studio Code обновлено до версии 1.1.1
- LangChain доступен в версии 13.1 и выше
- проектирование компонентов в каталоге Unity — общедоступная предварительная версия
- Улучшена обработка ошибок для повторяющихся сбоев непрерывного задания
- Бессерверные хранилища SQL теперь доступны в дополнительных регионах
- Общий доступ к схемам с помощью разностного общего доступа (общедоступная предварительная версия)
- Выполнение задач условно в заданиях Azure Databricks
- Поставщик Databricks Terraform обновлен до версии 1.22.0
- Расширенные функции безопасности и соответствия требованиям
- Мониторинг Lakehouse — общедоступная предварительная версия
- Databricks Runtime 13.3 LTS (бета-версия)
- Новые операции Git обычно доступны: слияние ветвей, перебаза и извлечения с разрешением конфликтов
-
Июль 2023 г.
- Администраторы рабочей области теперь могут создавать группы учетных записей
- Роль диспетчера групп находится в общедоступной предварительной версии
- Интерфейс командной строки Databricks обновлен до версии 0.202.0 (общедоступная предварительная версия)
- Пакет SDK Databricks для Python обновлен до версии 0.3.0 (бета-версия)
- Пакет SDK Databricks для Go обновлен до версии 0.14.1 (бета-версия)
- Пакет SDK Databricks для Go обновлен до версии 0.14.0 (бета-версия)
- Выполнение другого задания в качестве задачи в задании Azure Databricks
- обновление сети рабочей области получает поддержку пользовательского интерфейса (GA)
- Все пользователи могут получить доступ к продуктам данных в Databricks Marketplace по умолчанию
- Классический режим сочетаний клавиш
- Lakehouse Federation позволяет выполнять запросы к внешним провайдерам баз данных (Общедоступная предварительная версия)
- Перемещение в корзину, включенную для Репозитория
- Создание оповещений для медленных или застрявших заданий
- Пакет SDK Databricks для Go обновлен до версии 0.13.0 (бета-версия)
- Пакет SDK Databricks для Python обновлен до версии 0.2.0 (бета-версия)
- Интерфейс командной строки Databricks обновлен до версии 0.201.0 (общедоступная предварительная версия)
- Пакет SDK Databricks для Python обновлен до версии 0.2.1 (бета-версия)
- Помощник Databricks доступен в общедоступной предварительной версии
- Отключение пользователей и субъектов-служб из учетной записи
- Подготовка SCIM на уровне учетной записи теперь деактивирует пользователей при деактивации в поставщике удостоверений
- Доступ администратора каталога корзины
- Защита отрисовки типов MIME и отрисовка страницы атак XSS теперь всегда включена
- тома каталога Unity находятся в общедоступной предварительной версии
- Упрощенное взаимодействие с отправкой отзывов о продукте из рабочей области
- Расширение Databricks для Visual Studio Code обновлено до версии 1.1.0
- функции теперь отображаются в обозревателе каталогов (общедоступная предварительная версия)
- Поставщик Databricks Terraform обновлен до версии 1.21.0
-
Максимальное смещение для запросов API
List all jobs
иList job runs
теперь ограничено - Databricks Runtime 13.2 — общедоступная версия
- Разностный общий доступ и Databricks Marketplace поддерживают общий доступ к представлению (общедоступная предварительная версия)
- Скрипты инициализации в DBFS закончились 1 сентября 2023 г.
-
Июнь 2023 г.
- Поставщик Databricks Terraform обновлен до версии 1.20.0
- Интерфейс командной строки Databricks обновлен до версии 0.200.1 (общедоступная предварительная версия)
- Пакет SDK Databricks для Go обновлен до версии 0.12.0 (бета-версия)
- Пакет SDK Databricks для Go обновлен до версии 0.11.0 (бета-версия)
- Пакет SDK Databricks для Python (бета-версия)
- Пакет SDK Databricks для Go (бета-версия)
- журнал аудита Access, оплачиваемое использование и системные таблицы происхождения (общедоступная предварительная версия)
- Модели в каталоге Unity (общедоступная предварительная версия)
- Databricks Marketplace теперь является общедоступной
- Databricks Runtime 13.2 (бета-версия)
- Расширение Databricks для Visual Studio Code (общая доступность)
- Включение ключей, управляемых клиентом, с помощью Azure CLI и PowerShell без шаблона
- Бессерверные хранилища SQL работают с включенными серверными Приватный канал Azure
- Обзор завершенных заданий в пользовательском интерфейсе заданий Azure Databricks
- Интерфейс командной строки Databricks (общедоступная предварительная версия)
-
Улучшена разбивка результатов на страницы из
List all jobs
запросов API иList job runs
запросов API - Браузер рабочей области с полной страницей включает Репозиторий
- Поставщик Databricks Terraform обновлен до версии 1.19.0
- Выполнение заданий в качестве субъекта-службы (общедоступная предварительная версия)
- Новый пользовательский интерфейс субъекта-службы обеспечивает лучший интерфейс управления
- Домашние папки восстанавливаются при повторном добавлении пользователей в рабочие области
- Databricks Marketplace: теперь доступны частные обмены
- Databricks Marketplace: потребители могут удалять продукты данных с помощью пользовательского интерфейса
- Databricks Marketplace: поставщики могут создавать собственные профили
- Databricks Connect V2 — это общедоступная версия для Python
- Поставщик Databricks Terraform обновлен до версии 1.18.0
- Новые поставщики Databricks Marketplace
- Databricks Runtime 13.1 — общедоступная версия
- Просмотр данных из ноутбуков, редактора SQL и обозревателя каталогов в унифицированном браузере схем (общедоступная предварительная версия)
-
Май 2023 г.
- Создание или изменение интерфейса таблицы поддерживает загрузку Avro, Parquet и текстовых файлов
- Использование пользовательского интерфейса добавления данных для загрузки данных с помощью внешних расположений каталога Unity (общедоступная предварительная версия)
- Запуск записных книжек Databricks в хранилищах SQL (общедоступная предварительная версия)
- Запретить вводу ключа принимать предложение автозавершения
- Новый регион: Китай Восточная 3
- Поддержка типов виртуальных машин конфиденциальных вычислений Azure (общедоступная предварительная версия)
- Поставщик Databricks Terraform обновлен до версии 1.17.0
- Пользовательский интерфейс отправки данных поддерживает новые типы данных столбцов
- Привяжите каталоги Unity Catalog к определённым рабочим областям
- Все пользователи могут подключаться к Fivetran с помощью Partner Connect (общедоступная предварительная версия)
- Поставщик Databricks Terraform обновлен до версии 1.16.1
- Драйвер JDBC Databricks 2.6.33
- Partner Connect поддерживает Alation
- Новая тема по умолчанию для редактора
- Поставщик Databricks Terraform обновлен до версии 1.16.0
- поддержка каталога Unity для управляемых удостоверений Azure теперь общедоступна
- Databricks Runtime 13.1 (бета-версия)
- Выполнение запросов SQL на основе файлов в рабочем процессе Azure Databricks
- Поставщик Databricks Terraform обновлен до версии 1.15.0
- регионы Azure China теперь поддерживают Unity Catalog
- Псевдонимы учетных записей теперь доступны в консоли учетной записи
- Совместное использование записных книжек с помощью разностного общего доступа
- Azure Databricks больше не создает бессерверный начальный хранилище SQL
- В API хранилищах SQL включение бессерверных вычислений теперь должно быть явным
- Изменения параметров рабочей области для бессерверных хранилищ SQL
- Изменения бессерверных параметров вычислений для учетных записей и рабочих областей
- Databricks SQL Serverless — общедоступная версия
- Обновление существующей рабочей области с безопасным подключением к кластеру или Приватный канал Azure (общедоступная предварительная версия)
- Нерекомендуемые скрипты инициализации кластера в DBFS
- Унифицированная навигация (общедоступная предварительная версия)
-
Апрель 2023 г.
- Databricks Marketplace (общедоступная предварительная версия): открытая платформа для данных, аналитики и ИИ
- Настройка модуля форматирования Python
- Файлы рабочей области — общедоступная версия
- Скрипты инициализации в области кластера теперь можно хранить в файлах рабочей области
- Создание области секрета с поддержкой Azure Key Vault с помощью субъекта-службы
- Новые привилегии для общего доступа обеспечивают делегирование общих, получателей и задач управления поставщиками
- Databricks Connect версии 2 (общедоступная предварительная версия)
- Новый пользовательский интерфейс метрик кластера
- Databricks Runtime 13.0 — общедоступная версия
- Управление доступом к консоли учетной записи по диапазонам IP-адресов (общедоступная предварительная версия)
- Поставщик Databricks Terraform обновлен до версии 1.14.3
- Записи журнала диагностики для измененных параметров администратора для рабочей области
- Для начального управляемого клиентом ключа для управляемых дисков Azure Databricks теперь завершает вычислительные ресурсы.
- Поставщик Databricks Terraform обновлен до версий 1.14.1 и 1.14.2
- Объединенные параметры пользователя SQL и общие параметры пользователя
- Устаревшие визуализации записных книжек устарели
- Создание или изменение таблицы на странице отправки файлов поддерживает отправку JSON-файла
-
Март 2023 г.
- Поставщик Databricks Terraform обновлен до версии 1.14.0
- Поддержка Databricks Runtime 7.3 LTS ML заканчивается
- Распределенное обучение с помощью TorchDistributor
- Databricks Runtime 13.0 (бета-версия)
- Улучшенный редактор файлов
- Изменение избыточности корневого хранилища DBFS для существующих рабочих областей Azure Databricks
- Поддержка записной книжки .ipynb (Jupyter) в Repos (предварительная версия)
- Поддержка перезагрузки4j
- Новые IP-адреса для региона Восточной Азии
- Параллельное выполнение ячеек SQL в записной книжке
- Создание задач задания с помощью кода Python, хранящегося в репозитории Git
- Поставщик Databricks Terraform обновлен до версии 1.13.0
- Поставщик Databricks Terraform обновлен до версии 1.12.0
- Объединенная консоль администрирования SQL и консоль администрирования рабочей области
- Обслуживание моделей — общедоступная версия
- Автоматическая подстановка функций — это общедоступная версия
- Для новых рабочих областей, использующих определяемые пользователем учетные записи, IP-адрес хранилища Azure требует дополнительного UDR
- Корневое хранилище DBFS Azure Databricks использует Azure Data Lake Storage 2-го поколения для новых рабочих областей
- доступность обозревателя новых каталогов
- просмотр частых запросов и пользователей таблицы с помощью вкладки "Аналитика"
- Точный поиск соответствия доступен в глобальном поиске
- Просмотр сведений о происхождении заданий Azure Databricks
- Databricks Runtime 12.2 LTS и Databricks Runtime 12.2 LTS ML являются общедоступными
- Файлы рабочей области теперь доступны в общедоступной предварительной версии
-
Февраль 2023 г.
- Поддержка экземпляров серии ND A100 версии 4 (общедоступная предварительная версия)
- Ray в Azure Databricks (общедоступная предварительная версия)
- ограничение выходных результатов ячейки записной книжки увеличилось
- Задания Azure Databricks теперь поддерживают выполнение непрерывных заданий
- Активация задания Azure Databricks при поступлении новых файлов
- Поставщик Databricks Terraform обновлен до версии 1.10.0
- Устаревшие глобальные скрипты и скрипты, именованные кластером, отключены
- Улучшения пользовательского интерфейса эксперимента MLflow
- Databricks Runtime 12.2 (бета-версия)
- Использовать управляемые удостоверения, назначаемые пользователем, для доступа к хранилищу в каталоге Unity (общедоступная предварительная версия)
- Расширение Databricks для Visual Studio Code (общедоступная предварительная версия)
- Общесерверная общедоступная предварительная версия вывода в режиме реального времени теперь доступна всем клиентам
- Бессерверные хранилища SQL доступны для рабочих областей в поддерживаемых регионах (общедоступная предварительная версия)
- Поставщик Databricks Terraform обновлен до версии 1.9.2
- Управляемые клиентом ключи помогают защитить и контролировать доступ к некоторым типам данных (GA)
- Обозреватель переменных в записных книжках Azure Databricks
-
Январь 2023 г.
- Включение частного подключения с помощью Приватный канал Azure (GA)
- Учетная запись SCIM теперь является общедоступной
- Упрощение создания и редактирования заданий Azure Databricks в пользовательском интерфейсе
- Улучшения пользовательского интерфейса заданий Azure Databricks при просмотре заданий
- Новый экран консоли учетной записи обеспечивает более эффективное управление учетными записями
- Поставщик Databricks Terraform обновлен до версии 1.9.1
- пользователи учетной записи могут обновлять параметры электронной почты в консоли учетной записи
- Поддержка регионов, консолидированная на одну страницу
- Databricks Runtime 12.1 и Databricks Runtime 12.1 ML — это общедоступная версия
- Теперь политики кластеров поддерживают ограничение максимального количества кластеров на пользователя
- Поставщик Databricks Terraform обновлен до версии 1.9.0
- Бессерверные хранилища SQL доступны в регионах Центрально-США и Северной Европы
- Partner Connect поддерживает подключение к Privacera
- Поставщик Databricks Terraform обновлен до версии 1.8.0
- Databricks Runtime 12.1 (бета-версия)
- Partner Connect поддерживает Sigma
- Новые левой и правой боковой панели в записных книжках Databricks
-
Декабрь 2022 г.
- Драйвер SQL Databricks для Go общедоступен
- Предотвращение параллельных обновлений рабочей области
- Новый регион Azure: Китай Северная 3
- Поставщик Databricks Terraform обновлен до версии 1.7.0
- Databricks Runtime 12.0 и 12.0 ML — это общедоступная версия
- Теперь задания доступны в глобальном поиске (общедоступная предварительная версия)
- Графы использования с выставлением счетов теперь могут агрегироваться по отдельным тегам
- Использование SQL для указания расположений хранилища на уровне схемы и каталога для управляемых таблиц каталога Unity
- запись данных происхождения с помощью каталога Unity теперь общедоступна
- Драйвер ODBC Databricks 2.6.29
- Драйвер JDBC Databricks 2.6.32
- Partner Connect поддерживает подключение к AtScale
-
Ноябрь 2022 г.
- Расширенные уведомления для заданий Azure Databricks (общедоступная предварительная версия)
- Databricks Runtime 12.0 (бета-версия)
- Настройка брандмауэров хранилища Azure для предоставления доступа из бессерверных хранилищ SQL
- Теперь пользовательский интерфейс отправки данных можно отключить с помощью параметров администратора
- поддержка Partner Connect для каталога Unity — это ga
- Работа с большими репозиториями с разреженным извлечением
- Поставщик Databricks Terraform обновлен до версии 1.6.5
- Создание бессерверных хранилищ SQL в регионе "Западная часть США"
- Поставщик Databricks Terraform обновлен до версий 1.6.3 и 1.6.4
- Укажите расположение облачного хранилища для управляемых таблиц каталога Unity на уровнях каталога и схем
- Доступ к недавним объектам из поля поиска в верхней строке рабочей области
- Создание или изменение таблицы на странице отправки файлов теперь поддерживает несколько файлов
- Создание или изменение таблицы на странице отправки файлов теперь поддерживает перезапись
- Поиск заданий по имени с помощью API заданий 2.1
- Поставщик Databricks Terraform обновлен до версии 1.6.2
- Поиск таблиц в каталоге Unity — ga
-
Октябрь 2022 г.
- Общедоступная версия: поддержка репозиториев для файлов, не относящихся к записной книжке
- Ключи, управляемые клиентом для шифрования управляемых дисков
- Развертывание моделей для потокового вывода с помощью записных книжек Delta Live Tables
- Подключение к Fivetran из пользовательского интерфейса добавления данных
- Драйвер SQL Databricks для Node.js общедоступен
- Partner Connect поддерживает подключение к erwin Data Modeler by Quest
- Поддержка Хранилища компонентов Databricks для Azure Cosmos DB (общедоступная предварительная версия)
- Принудительное применение типов кластеров изоляции пользователей в рабочей области
- Databricks Runtime 11.3 LTS и 11.3 LTS ML являются общедоступными
- Форматирование кода Python в записных книжках (общедоступная предварительная версия)
- Субъекты-службы предоставляют доступ только api к учетной записи Azure Databricks
- Политика личного кластера вычислений доступна по умолчанию всем пользователям
- Добавление пользовательского интерфейса данных предоставляет центральный пользовательский интерфейс для загрузки данных в Azure Databricks
- Создание или изменение таблицы на странице отправки файлов унифицированы для отправки небольших файлов в Delta Lake
- Partner Connect поддерживает подключение к Hevo Data
- Включение защиты администратора для общих кластеров без изоляции
- Sql Persona, интегрированный с новым интерфейсом поиска
- Наследование привилегий теперь поддерживается в Unity Catalog
- Верхняя панель навигации в пользовательском интерфейсе
- Databricks Runtime 11.3 (бета-версия)
- Консоль учетной записи доступна на нескольких языках
-
Сентябрь 2022 г.
- Новое эталонное решение для обработки естественного языка
- другие регионы для каталога Unity
- Верхняя панель навигации в пользовательском интерфейсе
- Теперь журналы аудита включают события для веб-терминала
- журналы аудита теперь включают события для управления учетными данными для репозиториев Git
- Выберите политики кластера непосредственно в пользовательском интерфейсе Delta Live Tables
- Новая карточка обработки данных на целевых страницах рабочей области
- Оркестрация задач Databricks SQL в рабочих процессах Azure Databricks (общедоступная предварительная версия)
- Кэш Delta теперь является кэшем дисков
- сбор и просмотр данных происхождения с помощью каталога Unity (общедоступная предварительная версия)
- поиск таблиц с помощью обозревателя каталогов (общедоступная предварительная версия)
- Просмотр и упорядочение ресурсов в браузере рабочей области между пользователями
- Databricks Runtime 11.2 и Databricks Runtime 11.2 для ML являются общедоступными
-
Август 2022 г.
- Пользователи учетной записи могут получить доступ к консоли учетной записи
- Драйвер ODBC Databricks 2.6.26
- Драйвер JDBC Databricks 2.6.29
- Клиент хранилища признаков Databricks теперь доступен в PyPI
- Каталог Unity находится в стадии общего доступа
- Разностный общий доступ теперь общедоступен
- Databricks Runtime 11.2 (бета-версия)
- Уменьшенный объем сообщений в интерфейсе Delta Live Tables для непрерывных конвейеров
- Упрощенная конфигурация кластера для конвейеров Delta Live Tables
- Оркестрация задач dbt в рабочих процессах Databricks (общедоступная предварительная версия)
- Федерация удостоверений теперь общедоступна
- Partner Connect поддерживает подключение к Stardog
- Интеграция хранилища признаков Databricks с бессерверным выводом в реальном времени
- Дополнительная поддержка типов данных для автоматического поиска признаков в хранилище признаков Databricks
- принести собственный ключ: шифрование учетных данных Git
- Предварительная версия пользовательского интерфейса кластера; режим доступа заменяет режим безопасности
- Ограничения каталога Unity (Общедоступная предварительная версия)
- Бессерверный вывод в реальном времени (общедоступная предварительная версия)
- Улучшенный поиск рабочей области теперь предоставляется в общедоступной версии
- Использовать созданные столбцы при создании наборов данных Delta Live Tables
- Улучшено редактирование записных книжек с помощью редактора на основе Monaco (экспериментальная версия)
- Прекращение поддержки Databricks Runtime 10.3
- Включение частного подключения с помощью Приватного канала Azure (общедоступная предварительная версия)
- Включение бессерверных хранилищ SQL для рабочей области (общедоступная предварительная версия)
- Разностные динамические таблицы теперь поддерживают обновление только выбранных таблиц в обновлениях конвейера
- Теперь процесс выполнения задания ожидает завершения установки библиотек кластера
-
Июль 2022 г.
- Databricks Runtime 11.1 и Databricks Runtime 11.1 для ML предоставляются в общедоступной версии
- Photon предоставляется в общедоступной версии
- Уведомление после завершения записной книжки
- увеличено ограничение количества заданий в рабочих областях Azure Databricks
- Подробные журналы аудита теперь записываются при выполнении запросов SQL Databricks
- Драйвер Databricks JDBC 2.6.27
- Драйвер ODBC Databricks 2.6.25
- Databricks Runtime 11.1 (бета-версия)
- Улучшенные визуализации записных книжек
-
Июнь 2022 г.
-
ALTER TABLE
изменения разрешений для каталога Unity - Прекращение поддержки Databricks Runtime 6.4 (расширенная поддержка)
- Прекращение поддержки Databricks Runtime 10.2
- Драйвер ODBC Databricks 2.6.24
- Поставщик Terraform для Databricks теперь общедоступен
- Databricks Runtime 11.0 и 11.0 ML — общедоступные версии; 11.0 Photon — общедоступная предварительная версия
- Изменение рабочего каталога Repos по умолчанию в Databricks Runtime 11.0
- Databricks Runtime 10.1 — прекращение поддержки
- Delta Live Tables теперь поддерживает SCD тип 2
- Создавайте конвейеры Delta Live Tables непосредственно в пользовательском интерфейсе Azure Databricks
- Выберите канал Delta Live Tables при создании или изменении конвейера
- Обмен данными между задачами в заданиях Azure Databricks со значениями задач
- Включение переключения учетных записей в пользовательском интерфейсе Databricks
-
-
Май 2022 г.
- Копирование и вставка ячеек записной книжки между разными вкладками и окнами
- Дополнительная поддержка типов данных для автоматического поиска признаков в хранилище признаков Databricks
- Databricks Runtime 11.0 (бета-версия)
- Улучшенный поиск в рабочей области (общедоступная предварительная версия)
- Просмотр результатов выполнения ячеек SQL в записных книжках Python с помощью собственных возможностей Python
- Репозитории Databricks: поддержка дополнительных файлов в репозитории
- Репозитории Databricks: исправление проблемы с потерей данных эксперимента MLflow
- Новый регион Azure: Центрально-западная часть США
- мастер обновления упрощает копирование баз данных и нескольких таблиц в каталог Unity (общедоступная предварительная версия)
- Поддержка прокси-сервера HTTP на уровне системы в Power BI Desktop
- Журналы аудита теперь могут записываться при выполнении команды записной книжки
- Databricks Runtime 10.5 и 10.5 ML — это общедоступная версия; 10.5 Фотона — общедоступная предварительная версия
- Драйвер JDBC Databricks 2.6.25
- Просмотр конвейера, запущенного пользователем, как в пользовательском интерфейсе Delta Live Tables
-
Апрель 2022 г.
- Новый регион Azure: Центральная Швеция
- Использование тегов для улучшения управления заданиями Azure Databricks
- Databricks Runtime 10.0 — прекращение поддержки
- Получение визуального обзора выполнения задания с помощью нового представления матрицы заданий
- Экономия времени и ресурсов при неудачном выполнении задания Azure Databricks
- Просмотр журнала выполнения для задач задания
- Назначение нового кластера в пользовательском интерфейсе заданий, когда доступ к одному пользователю больше не существует
- Databricks Runtime 10.5 (бета-версия)
- Интерфейс Delta Live Tables улучшен для отключения несанкционированных действий
- AutoML общедоступен
- Использовать наборы данных из каталога Unity с AutoML
- Delta Live Tables доступен в общем доступе на AWS и Azure и в стадии общедоступного предварительного просмотра на GCP
- интерфейс SQL Delta Live Tables: незначительные изменения имен таблиц
-
Март 2022 г.
- Более высокая производительность и снижение затрат для конвейеров Delta Live Tables с улучшенной функцией автомасштабирования от Databricks
- Файлы в Repos включены по умолчанию в новых рабочих областях
- Хранилище компонентов Databricks теперь находится в общедоступной версии
- Общий доступ к экспериментам на странице экспериментов
- Исправлена ошибка RStudio Workbench
- Новые параметры языка рабочей области
- Общедоступная версия Databricks Runtime 10.4 LTS и 10.4 LTS ML, общедоступная предварительная версия 10.4 LTS Photon
- каталог Unity доступен в общедоступной предварительной версии
- Общедоступная предварительная версия Delta Sharing
- Смена ключа, управляемого клиентом, для управляемых служб
- расширенный контроль доступа для конвейеров Delta Live Tables
-
Протестируйте функциональность предварительной версии Delta Live Tables с новым параметром
channel
(Общедоступная предварительная версия) - улучшена обработка ошибок для функций Python Delta Live Tables (общедоступная предварительная версия)
- Улучшения в Databricks Repos
- Ведение журнала диагностики для изменений политики кластера
- Databricks Runtime 10.4 (бета-версия)
-
Февраль 2022 г.
- Упрощенное планирование для ваших конвейеров Delta Live Tables (общедоступная предварительная версия)
- Удобно просматривать историю обновлений вашего конвейера Delta Live Tables (предварительная версия для публичного доступа)
- Обеспечение идемпотентности задания для запроса на немедленное выполнение API заданий
- Улучшения стабильности и масштабируемости службы заданий
- Сравнение выполнений MLflow из разных экспериментов
- Улучшения в отображении выполнений сравнения MLflow
- Улучшение видимости владельцев выполнения заданий в пользовательском интерфейсе кластеров
- Удаление столбцов набора данных в AutoML
- Страница экспериментов стала общедоступной
- Поддержка временных таблиц в интерфейсе Python delta Live Tables
- улучшения пользовательского интерфейса для разностных динамических таблиц (общедоступная предварительная версия)
- Прекращение поддержки Databricks Runtime 9.0
- обновления целевой страницы Обработка и анализ данных и инженерии
- Databricks Repos теперь поддерживают AWS CodeCommit для интеграции с Git
- Улучшенная визуализация ваших конвейеров Delta Live Tables (Общедоступная предварительная версия)
- Обновление средства синтаксического анализа Markdown
- Delta Live Tables теперь поддерживает обработку фиксации изменений данных (публичная предварительная версия)
- Дополнительные хранилища метаданных теперь доступны в нескольких регионах
- Выберите фреймворки алгоритмов для использования с AutoML
- Поиск признаков из Интернет-магазинов в моделях MLflow, размещенных в Databricks
- Общедоступная версия Databricks Runtime 10.3 и 10.3 ML; общедоступная предварительная версия 10.3 Photon
-
Январь 2022 г.
- Веб-перехватчики реестра моделей MLflow в Azure Databricks (общедоступная предварительная версия)
- Критическое изменение. Токен идемпотентности кластера сбрасывается при завершении работы кластера
- Databricks Runtime 10.3 (бета-версия)
- Просмотр сведений о последних выполнениях заданий
- Использование Markdown в редакторе файлов Databricks Repos
- Улучшение управления кластерами для заданий, которые оркестрируют несколько задач
- Прекращение поддержки Databricks Runtime 8.3 и Databricks Runtime 8.4
- Драйвер Databricks JDBC 2.6.22
- Дополнительные хранилища метаданных теперь доступны в нескольких регионах
- Изменение кнопки создания общей папки на значок разрешений в записных книжках
- Новые параметры языка рабочей области
- Дополнительные хранилища метаданных теперь доступны в нескольких регионах
-
Декабрь 2021 г.
- Продление поддержки Databricks Runtime 6.4 Extended Support
- Прекращение поддержки Databricks Runtime 5.5 Extended Support
- Драйвер Databricks JDBC 2.6.21
- Databricks Connector for Tableau 2021.4
- Общедоступная версия Databricks Runtime 10.2 и 10.2 ML; общедоступная предварительная версия 10.2 Photon
- Доступность региона Западная Швейцария
- Обновление средства синтаксического анализа Markdown
- Улучшения пользовательского интерфейса для Delta Live Tables
- Дополнительные метахранилища скоро появятся в нескольких регионах
- обновление ретранслятора SCC для юго-восточного региона Австралии
- Продление поддержки Databricks Runtime 8.3
- Databricks Runtime 10.2 (бета-версия)
- Отмена недавнего ломаюшего изменения, которое удалило экранирование и кавычки из $ в значениях переменных среды при создании кластера
-
Ноябрь 2021 г.
- Создание тегов для таблиц компонентов (общедоступная предварительная версия)
- Выделение синтаксиса и автозаполнение для команд SQL в ячейках Python
- Переименование, удаление и изменение разрешений для экспериментов MLflow на странице эксперимента (общедоступная предварительная версия)
- Новые профили данных в записных книжках: табличные и графические сводки ваших данных (общедоступная предварительная версия)
- Улучшено логирование при изменении схем во время выполнения потока Delta Live Tables
- Общедоступная версия Databricks Partner Connect
- Критическое изменение: удалите экранирование и кавычки из $в значениях переменных среды для создания кластера
- Улучшения, связанные с упрощением использования файлов в Repos
- Прекращение поддержки устаревших мини-приложений SQL 15 января 2022 г.
- Улучшения пользовательского интерфейса для заданий Azure Databricks
- Соединитель Delta Sharing для Power BI
- Драйвер ODBC Databricks 2.6.19
- Общедоступная версия Databricks Runtime 10.1 и 10.1 ML; общедоступная предварительная версия 10.1 Photon
- Databricks Runtime 10.1 (бета-версия)
- Переименование и удаление экспериментов MLflow (общедоступная предварительная версия)
- Возможность создания политики кластера путем клонирования существующей
- Упрощенный процесс изменения языка по умолчанию для записных книжек и ячеек записной книжки
- Использование файлов в Repos и- веб-терминала
-
Октябрь 2021 г.
- Прекращение поддержки Databricks Runtime 8.2
- Общедоступная версия Databricks Runtime 10.0 и 10.0 ML; общедоступная предварительная версия 10.0 Photon
- улучшения пользовательского интерфейса для разностных динамических таблиц (общедоступная предварительная версия)
- Укажите кластер фиксированного размера при создании нового конвейера в Delta Live Tables (публичная предв. версия)
- Просмотр метрик качества данных для таблиц Delta Live Tables в активированных конвейерах (общедоступная предварительная версия)
- Общедоступная версия оркестрации заданий
- Databricks Connector для Power BI
- Поддержка произвольных типов файлов в Repos
- Получение подробных выходных данных выполнения задания с помощью API заданий
- Улучшение удобочитаемости путей записных книжек в пользовательском интерфейсе заданий
- Откройте конвейер Delta Live Tables в новой вкладке или окне
-
Новая escape-последовательность для
$
в устаревших мини-приложениях для входных данных в SQL - Ускорение развертывания модели с автоматически созданной записной книжкой пакетного вывода
-
Сентябрь 2021 г.
- Databricks Runtime 10.0 (бета-версия)
- Драйвер ODBC Databricks 2.6.18
- Использование управляемых клиентом ключей для шифрования в существующих рабочих областях
- Общедоступная версия Databricks Runtime 9.1 LTS и 9.1 LTS ML; общедоступная предварительная версия 9.1 LTS Photon
- Databricks Runtime 8.1 — прекращение поддержки
- Драйвер Databricks JDBC 2.6.19
- Делиться таблицами возможностей между рабочими областями
- Общая доступность нескольких типов экземпляров GPU Azure
-
Теперь Repos поддерживает
.gitignore
- Расширенный пользовательский интерфейс заданий теперь является стандартным для всех рабочих областей
- Databricks Runtime 9.1 (бета-версия)
- Упрощенное управление параметрами для заданий Azure Databricks
- Databricks SQL (общедоступная предварительная версия) доступна во всех рабочих областях
- Удаление таблиц компонентов из хранилища компонентов
- Предоставление разрешений на просмотр конвейера обработки данных в пользовательском интерфейсе Delta Live Tables (общедоступная предварительная версия)
- Сокращение использования ресурсов кластера с помощью delta Live Tables (общедоступная предварительная версия)
- Используйте модели MLflow в конвейерах Delta Live Tables (публичный предварительный просмотр)
- Поиск потоков обработки Delta Live Tables по имени (общедоступная предварительная версия)
- PyTorch TorchScript и другие сторонние библиотеки теперь поддерживаются в заданиях Azure Databricks
- Databricks Runtime 8.0 — прекращение поддержки
-
Август 2021 г.
- Общая доступность Databricks Repos
- Увеличенное время ожидания для длительных заданий записных книжек
- Улучшения стабильности и масштабируемости службы заданий
- Права пользователей, предоставленные членством в группе, отображаются в консоли администратора
- Управление разрешениями для экспериментов MLflow (общедоступная предварительная версия)
- Улучшенное создание заданий из записных книжек
- Виртуальные машины серии Ddsv4 (общедоступная предварительная версия)
- Улучшенная поддержка для свертываемых заголовков записных книжек
- Общедоступная версия Databricks Runtime 9.0 и 9.0 ML; общедоступная предварительная версия 9.0 Photon
- Databricks Runtime 9.0 (бета-версия)
- Программное управление репозиториями с помощью Databricks CLI (общедоступная предварительная версия)
- Программное управление репозиториями с помощью REST API (общедоступная предварительная версия)
- Прекращение поддержки Databricks Runtime серии 7.6
- События аудита записываются в журнал при взаимодействии с репозиториями Databricks
- Улучшенный рабочий процесс создания и администрирования заданий
- Среды выполнения Photon уже доступны (общедоступная предварительная версия)
- упрощенные инструкции по настройке учетных данных Git (общедоступная предварительная версия)
-
Импорт нескольких записных книжек в формате
.html
- Улучшения удобства использования для Delta Live Tables
-
Июль 2021 г.
- Управление разрешениями для экспериментов MLflow с помощью REST API Databricks
- Веб-интерфейс Azure Databricks локализован на португальском и французском языках (общедоступная предварительная версия)
- Поддержка Databricks Runtime 5.5 LTS for Machine Learning завершается, будет заменена версией с расширенной поддержкой
- Поддержка Databricks Light 2.4 завершается 5 сентября, будет заменена версией с расширенной поддержкой
- Новый регион Azure: Центрально-Западная Германия
- Сведения об актуальности признаков, доступные в пользовательском интерфейсе Хранилища признаков в Databricks (общедоступная предварительная версия)
- Отображение до 10 000 строк результатов
- Массовый импорт и экспорт записных книжек в папке в качестве исходных файлов
- Функция автозаполнения в записных книжках SQL теперь использует для ключевых слов SQL верхний регистр
- Мини-приложения с возможностью изменения порядка и размера в записных книжках
- Исправления для удобства использования пользовательского интерфейса Azure Databricks
- Быстро настройте параметры потока данных при создании нового потока Delta Live Tables
- Общедоступная версия Databricks Runtime 8.4 и 8.4 ML; общедоступная предварительная версия 8.4 Photon
- Использование Spark SQL с использованием Python API для Delta Live Tables
- Улучшены обработка и анализ данных с помощью заданий Azure Databricks (общедоступная предварительная версия)
- сниженные затраты на кластеры Delta Live Tables по умолчанию (предварительная общедоступная версия)
- Сортировка пайплайнов по имени в пользовательском интерфейсе Delta Live Tables (публичная предварительная версия)
- Изменения на странице "Вычисление"
- Поддержка Databricks Runtime 5.5 LTS будет прекращена, и ее заменит расширенная поддержка Databricks Runtime 5.5 в конце 2021 г.
- API Repos (общедоступная предварительная версия)
- Databricks Runtime 8.4 (бета-версия)
-
Июнь 2021 г.
- Исправление: Repos для Git включены по умолчанию в новых и существующих рабочих областях в некоторых регионах
- Изменение в разрешениях для хранилища признаков
- Улучшенный доступ к результатам в таблице запусков MLflow
- Повышение прозрачности затрат для Delta Live Tables
- Улучшенные ограничения качества данных для Delta Live Tables
- Изменения API для обновления и замены списков IP-адресов
- Драйвер ODBC Databricks 2.6.17
- Прекращение поддержки Databricks Runtime серии 7.5
- Оптимизировать производительность и контролировать затраты, используя разные пулы для узла драйвера и рабочих узлов
- Разрешения на уровне реестра для реестра моделей
- Корневой каталог пользователя больше не защищен при удалении пользователя с помощью API SCIM
- Общедоступная версия Databricks Runtime 8.3 и 8.3 ML; общедоступная предварительная версия 8.3 Photon
- Управление доступом к таблицам Python и SQL (общедоступно)
- Пользовательский интерфейс и API заданий теперь показывают владельца выполнения задания
- Защита конфиденциальных свойств конфигурации Spark и переменных среды с помощью секретов (общедоступная предварительная версия)
- Repos для Git включены по умолчанию в новых и существующих рабочих областях в некоторых регионах
- Переработан интерфейс параметров рабочей области
-
Обновления для запросов базы данных
ListTokens
иListAllTokens
, касающиеся токенов с истекшим сроком действия - Теперь требуется подтверждение при предоставлении или отмене разрешений администратора
- Изменения в сочетаниях клавиш в пользовательском веб-интерфейсе
-
Май 2021 г.
- Databricks Mosaic AI: собственное и совместное решение для полного жизненного цикла машинного обучения
- Аналитика SQL переименована в Databricks SQL
- создание конвейеров ETL и управление ими с помощью delta Live Tables (общедоступная предварительная версия)
- Точечные виртуальные машины Azure уже общедоступны
- Шифрование запросов и журнала запросов Databricks SQL с помощью собственного ключа (общедоступная предварительная версия)
- Увеличено ограничение на число завершённых универсальных кластеров
- Увеличенный лимит на число закрепленных кластеров
- Управление хранением результатов записной книжки (общедоступная предварительная версия)
- Шифрование записных книжек и секретных данных на уровне управления с помощью собственного ключа (общедоступная предварительная версия)
- Прекращение поддержки Databricks Runtime серии 7.4
- Пользователи репозиториев теперь могут интегрироваться с Azure DevOps, используя личные маркеры доступа
-
Апрель 2021 г.
- Databricks Runtime 8.2 (общедоступная версия)
- Упрощенное управление заданиями с помощью пользовательского интерфейса расширенных заданий
- Изменения политики кластера применяются автоматически к существующим кластерам при перезапуске и изменении
- Отслеживание повторных попыток в задачах заданий при неудачных попытках выполнения задачи
- Быстрый просмотр сведений о кластере при создании нового кластера
- Боковая панель MLflow отображает сведения о последнем эксперименте
-
Изменение канала по умолчанию для файлов
conda.yaml
в MLflow - Упрощенная проверка подлинности из Tableau Online в Azure Databricks с помощью идентификатора Microsoft Entra
- Databricks Runtime 8.2 (бета-версия)
- Новая расширенная инфраструктура требует обновления пользовательских маршрутов и исходящих брандмауэров
- Ограничения для пользователей и групп
- Упрощенный мониторинг состояния выполнения заданий
- Сценарии глобальной инициализации больше не выполняются в кластерах, обслуживающих модели
- Получение уведомлений по электронной почте о действиях в реестре моделей
- Прекращение поддержки Databricks Runtime серии 6.4
-
Март 2021 г.
- Azure Databricks теперь поддерживает темный режим просмотра записных книжек
- Сохранение TCO Azure Databricks с поддержкой точечных виртуальных машин Azure (общедоступная предварительная версия)
- Databricks Runtime 8.1 (общедоступная версия)
- Упрощенное создание и администрирование заданий с помощью пользовательского интерфейса расширенных заданий (общедоступная предварительная версия)
- Отслеживание повторных попыток задания с помощью нового последовательного значения, возвращаемого для каждой попытки запуска задания
- Увеличенное ограничение количества сохраненных заданий в рабочих областях Premium
- Более простой способ подключения к Azure Databricks из используемых средств бизнес-аналитики и клиентов SQL
- Репозитории Azure Databricks позволяют использовать репозитории Git для интеграции Databricks с системами CI/CD
- Автоматические повторные попытки для кластеров заданий, которые не удалось выполнить, с отмененными изменениями
- Упрощенная проверка подлинности из Tableau Desktop в Azure Databricks с помощью идентификатора Microsoft Entra
- Databricks Runtime 8.1 (бета-версия)
- Model Serving теперь поддерживает дополнительные типы моделей
- Новые варианты поиска в Model Registry
- Увеличено ограничение на число завершённых универсальных кластеров
- Увеличен лимит числа закрепленных кластеров в пределах рабочей области
- Databricks Runtime 8.0 (общедоступная версия)
-
Февраль 2021 г.
- Новый соединитель Power BI для Azure Databricks (общедоступная версия)
- Ведение журнала диагностики действий пользователей в Azure Databricks (общедоступная версия)
- В ответы REST API DBFS get-status и list добавлено поле modification_time
- Простое копирование длинных имен экспериментов в MLflow
- Настройка объема памяти и количества ядер для обслуживания кластеров
- Веб-терминал теперь общедоступен
- Соединитель Apache Spark для Базы данных SQL Azure и SQL Server поддерживает Databricks Runtime 7.x и более поздних версий
- Прекращение поддержки Databricks Runtime серии 7.2
- Databricks Runtime 7.6 (общедоступная версия)
- Databricks Runtime 8.0 (бета-версия)
- Databricks Runtime for Genomics является нерекомендуемым
- Просмотр более удобного для чтения файла JSON в представлении запуска артефактов MLflow
- Предоставление комментариев в реестре моделей с помощью REST API
- Легко указать значения кластера по умолчанию в вызовах API
- Настройка конфигурации рабочей роли кластера в соответствии с текущим распределением рабочих ролей
- Передача конкретных сведений о контексте в задачу в рамках задания с помощью переменных параметров задачи
- Сообщения об ошибках при сбоях заданий больше не содержат потенциально конфиденциальные сведения
-
Январь 2021 г.
- Безопасное подключение кластера (без общедоступного IP-адреса) — общедоступная версия
- Прекращение поддержки Databricks Runtime 7.1
- Быстрый запуск кластеров с помощью образов Docker, предварительно загруженных в пулы экземпляров
- Операции поиска и замены записной книжки теперь поддерживают изменение всех вхождений совпадения
- Кластеры с одним узлом (общая доступность)
- Тип политики кластера свободной формы теперь называется неограниченным
- Поле политики кластера не отображается, если пользователь имеет доступ только к одной политике
- Прекращение поддержки Databricks Runtime 7.0
-
Декабрь 2020 г.
- Databricks Runtime 7.5 (общедоступная версия)
- API заданий теперь поддерживает обновление существующих заданий
- Новая глобальная платформа скриптов инициализации стала общедоступной
- Databricks Runtime 7.5 (бета-версия)
- В поле end_time API заданий теперь указывается эпоха
- Поиск файлов DBFS с помощью нового визуального браузера
- Элементы управления для визуального контроля заданий, кластеров, записных книжек и других объектов рабочей области по умолчанию включены в новых рабочих областях
- Улучшено отображение вложенных запусков в MLflow
- Администраторы могут блокировать учетные записи пользователей (общедоступная предварительная версия)
- Обновлен драйвер NVIDIA
-
Ноябрь 2020 г.
- Прекращение поддержки Databricks Runtime 6.6
- Выпуск общедоступной версии MLflow Model Registry
- Фильтрация выполнений эксперимента с учетом связывания зарегистрированной модели
- Галерея интеграции с партнерскими решениями теперь доступна на вкладке "Данные"
- В качестве имен типов теперь политики кластера используют allowlist и blocklist.
- Автоматическая повторная попытка при сбое создания кластера заданий
- Навигация по записным книжкам с помощью оглавления
- Databricks SQL (общедоступная предварительная версия)
- Кластеры с одним узлом теперь поддерживают службы контейнеров Databricks
- Databricks Runtime 7.4 (общедоступная версия)
- обновление драйвера JDBC
Databricks - Databricks Connect 7.3 (бета-версия)
-
Октябрь 2020 г.
- В онлайн-службе Power BI доступен новый соединитель Power BI для Azure Databricks (общедоступная предварительная версия)
- Databricks Runtime 7.4 (бета-версия)
- Использование ключей, управляемых клиентом, для корневой папки DBFS (общедоступная версия)
- Расширенное управление доступом к эксперименту (списки ACL)
- Импорт и экспорт файлов записных книжек Jupyter (ipynb) с высокой точностью
- Улучшение API SCIM: в ответе с записями пользователя возвращаются группы, к которым пользователь принадлежит напрямую и косвенно
- Теперь в исключения включен идентификатор запроса Azure
- Прекращение поддержки Databricks Runtime 6.5
- Безопасное подключение кластера (без общедоступных IP-адресов) предоставляется в общедоступной предварительной версии
-
Улучшение API SCIM: исправлен в ответ, возвращаемый в поле
$ref
- Журналы диагностики (аудита) теперь предоставляются с низкой задержкой
- Для Databricks Runtime 7.3, 7.3 ML и 7.3 Genomics объявлена долгосрочная поддержка (LTS)
- Отрисовка изображений с более высоким разрешением с помощью Matplotlib
- Создание областей секретов с поддержкой Azure Key Vault при помощи CLI или API Databricks
- Использование маркеров идентификатора Microsoft Entra для проверки подлинности в интерфейсе командной строки Databricks
- Новые регионы Azure (общедоступная предварительная версия)
-
Сентябрь 2020 г.
- Databricks Runtime версий 7.3, 7.3 ML и 7.3 Genomics теперь предоставляется в общей доступной версии
- Кластеры с одним узлом (общедоступная предварительная версия)
- Ограничение частоты вызовов REST API для DBFS
- Новые значки на боковой панели
- увеличение лимита на запущенные задания
- Реализация артефактов для списков управления доступом (ACL) в MLflow
- Повышение удобства использования MLflow
- Новый соединитель Power BI для Azure Databricks (общедоступная предварительная версия)
- Использование ключей, управляемых клиентом, для корневой папки DBFS (общедоступная предварительная версия)
- Новые драйверы JDBC и ODBC, позволяющие ускорить выполнение и уменьшить задержку операций бизнес-аналитики
- Обслуживание моделей MLflow (общедоступная предварительная версия)
- Улучшения пользовательского интерфейса кластеров
- Элементы управления для визуального контроля заданий, кластеров, записных книжек и других объектов рабочей области
- Возможность создания токенов больше не разрешена по умолчанию
- Поддержка в MLflow Model Registry использования моделей в нескольких рабочих областях
- Databricks Runtime 7.3 (бета-версия)
- Изменение имен типов рабочих нагрузок Azure Databricks
-
Август 2020 г.
- API управления токенами доступно в общем доступе, а администраторы могут использовать консоль администрирования для предоставления и отмены доступа пользователей к токенам
- Ограничения на размер сообщений для приложений Shiny расширены.
- Улучшены инструкции по настройке кластера в локальном режиме.
- Возможность просмотра версии записной книжки, связанной с запуском.
- Databricks Runtime 7.2 (общедоступная версия)
- Databricks Runtime 7.2 ML (общедоступная версия)
- Databricks Runtime 7.2 Genomics (общедоступная версия)
- API разрешений (общедоступная предварительная версия)
- Databricks Connect 7.1 (общедоступная версия)
- Повторяемый порядок установки библиотек кластера
- Создание модели на странице зарегистрированных моделей MLflow (общедоступная предварительная версия)
- Службы контейнеров Databricks поддерживают образы GPU
-
Июль 2020 г.
- Веб-терминал (общедоступная предварительная версия)
- Новая и более безопасная глобальная платформа скриптов инициализации (общедоступная предварительная версия)
- Списки IP-адресов для настройки доступа теперь общедоступны
- Новое диалоговое окно отправки файла
- Улучшения функций сортировки и фильтрации API SCIM
- Добавлены регионы Azure для государственных организаций
- Общедоступная версия Databricks Runtime 7.1
- Общедоступная версия Databricks Runtime 7.1 ML
- Общедоступная версия Databricks Runtime 7.1 Genomics
- Databricks Connect 7.1 (общедоступная предварительная версия)
- обновления API списка доступа к IP
- Записные книжки Python теперь поддерживают несколько выходов для каждой ячейки
- Параллельный просмотр кода записной книжки и ячеек с результатами
- Приостановка расписаний заданий
- Идентификаторы выполнения проверки конечных точек API заданий
- Маркеры идентификатора Microsoft Entra для авторизации в общедоступной версии REST API Databricks
- Автоматическое форматирование SQL в записных книжках
- Воспроизводимый порядок установки для библиотек Maven и CRAN
- Управление личными маркерами доступа пользователей с помощью API управления маркерами (общедоступная предварительная версия)
- Восстановление вырезанных ячеек записной книжки
- Назначение заданий CAN MANAGE для пользователей, не являющихся администраторами
- Пользователи Azure Databricks, не являющиеся администраторами, могут просматривать и фильтровать данные по имени пользователя с помощью API SCIM
- Ссылка для просмотра спецификации кластера при изучении сведений о выполнении задания
-
Июнь 2020 г.
- Databricks Connect теперь поддерживает Databricks Runtime 6.6
- Общедоступная версия Databricks Runtime 7.0 ML
- Databricks Runtime 7.0 (общедоступная версия) на базе Apache Spark 3.0
- Общедоступная версия Databricks Runtime 7.0 для Genomics
- Зависящие от этапа элементы управления доступом для моделей MLflow
- В Записных книжках теперь поддерживается отключение автоматической прокрутки
- Изменение IP-адресов хранилища метаданных 30 июня 2020 г.
- Прекращение поддержки Internet Explorer 11 с 15 августа
- Прекращение поддержки Databricks Runtime 6.2
- Упрощение и контроль процесса создания кластера с помощью политик кластера (общедоступная предварительная версия)
- Конечная точка SCIM Me теперь возвращает ответ, соответствующий SCIM
- Ограничение доступа к Azure Databricks с помощью списков IP-адресов (общедоступная предварительная версия)
-
Май 2020 г.
- Виртуальные машины серии Easv4 (бета-версия)
- Общедоступная версия Databricks Runtime 6.6 для Genomics
- Общедоступная версия Databricks Runtime 6.6 ML
- Общедоступная версия Databricks Runtime 6.6
- REST API DBFS удаляет ограничение размера конечной точки
- Простой просмотр большого количества зарегистрированных моделей MLflow
- Библиотеки, настроенные для установки во всех кластерах, не установлены в кластерах с Databricks Runtime 7.0 и более поздних версий
- Databricks Runtime 7.0 для Genomics (бета-версия)
- Databricks Runtime 7.0 ML (бета-версия)
- Общедоступная версия Databricks Runtime 6.6 for Genomics (бета-версия)
- Databricks Runtime 6.6 ML (бета-версия)
- Databricks Runtime 6.6 (бета-версия)
- Кластеры заданий теперь помечены тегом с именем задания и идентификатором
- Восстановление удаленных ячеек записной книжки
- Лимит очереди ожидающих заданий
-
Апрель 2020 г.
- Уникальные URL-адреса для каждой рабочей области Azure Databricks
- Расширение пользовательского интерфейса отслеживания MLflow
- Повышение удобства использования Notebook
- Использование маркеров для авторизации в REST API Databricks (общедоступная предварительная версия)
- Один пользователь может просматривать журналы Apache Spark в транзитном кластере
- Databricks Connect теперь поддерживает Databricks Runtime 6.5
- Прекращение поддержки Databricks Runtime 6.1 и версии Databricks Runtime 6.1 для ML
- Общедоступная версия Databricks Runtime 6.5
- Общедоступная версия Databricks Runtime 6.5 для Машинного обучения
- Общедоступная версия Databricks Runtime 6.5 for Genomics
- Прекращение поддержки Databricks Runtime 6.0 и версии Databricks Runtime 6.0 для ML
-
Март 2020 г.
- Доступен управляемый центр совместной работы MLflow Model Registry (общедоступная предварительная версия)
- Теги рабочей области, пула и кластера распространяются на сведения об использовании DBU и виртуальные машины Azure для улучшения отчетов по управлению затратами
- Databricks Runtime 7.0 (бета-версия) с предварительной версией Apache Spark 3.0
- Databricks Runtime 6.5 ML (бета-версия)
- Databricks Runtime 6.5 (бета-версия)
- Отзывы об Azure Databricks сейчас поступают на портал отзывов Azure Databricks
- Разработка и тестирование приложений Shiny в RStudio Server
- Изменение языка по умолчанию для записной книжки
- Databricks Connect теперь поддерживает Databricks Runtime 6.4
- Databricks Connect теперь поддерживает Databricks Runtime 6.3
-
Февраль 2020 г.
- Общедоступная версия Databricks Runtime 6.4 for Genomics
- Общедоступная версия Databricks Runtime 6.4 ML
- Общедоступная версия Databricks Runtime 6.4
- Новые интерактивные диаграммы предоставляют широкие возможности взаимодействия на стороне клиента.
- Новая сеть приема данных обеспечивает интеграцию решений партнеров с Delta Lake (общедоступная предварительная версия)
- Создатель рабочей области автоматически добавляется как администратор Azure Databricks.
- Стали доступны флаги для управления безопасностью рабочей области и управления доступом к функциям записных книжек
-
Январь 2020 г.
- Ожидается в ближайшее время: теги рабочей области, пула и кластера распространяются на сведения об использовании DBU и виртуальные машины Azure для улучшения отчетов по управлению затратами
- Azure Databricks и Azure Lighthouse можно использовать в одной подписке
- Общедоступная версия Databricks Runtime 6.3 for Genomics
- Общедоступная версия Databricks Runtime 6.3 ML
- Общедоступная версия Databricks Runtime 6.3
- Кэширование дисков включено по умолчанию
- Шаг стандартного автомасштабирования кластера теперь можно настроить
- API SCIM поддерживает разбивку на страницы для получения пользователей и получения групп (общедоступная предварительная версия)
- Ширина дорожки обозревателя файлов увеличена до 240 пикселей
- Завершается поддержка Databricks Runtime 3.5 LTS
-
Декабрь 2019 г.
- Databricks Connect теперь поддерживает Databricks Runtime 6.2
- Настройка кластеров с помощью собственного образа контейнера в службах контейнеров Databricks (общедоступная версия)
- Общедоступная версия Databricks Runtime 6.2 для Genomics
- Соединитель подготовки SCIM Azure Databricks, доступный в коллекции приложений
- Завершается поддержка Databricks Runtime 5.3 и 5.4
- Общедоступная версия Databricks Runtime 6.2 ML
- Общедоступная версия Databricks Runtime 6.2
- Databricks Connect теперь поддерживает Databricks Runtime 6.1
-
Ноябрь 2019 г.
- Databricks Runtime 6.2 ML (бета-версия)
- Databricks Runtime 6.2 (бета-версия)
- Настройка кластеров с помощью собственного образа контейнера в службах контейнеров Databricks
- Сведения о кластере теперь отображаются только в идентификаторе кластера в пути HTTP
- Секреты, на которые ссылаются свойства конфигурации и переменные среды Spark (общедоступная предварительная версия)
-
Октябрь 2019 г.
- Метрики поддержки, перемещенные в Центры событий Azure
- Сквозная передача учетных данных Azure Data Lake Storage в стандартных кластерах и Scala теперь общедоступна
- Общедоступная версия Databricks Runtime 6.1 для Genomics
- Общедоступная версия Databricks Runtime 6.1 для Машинного обучения
- Частота вызовов API MLflow теперь ограничена
- Пулы экземпляров для быстрого запуска кластера теперь общедоступны
- Общедоступная версия Databricks Runtime 6.1
- Общедоступная версия Databricks Runtime 6.0 для Genomics
- Возможность развертывания рабочей области Azure Databricks в собственной виртуальной сети, также называемой внедрением виртуальной сети, является общедоступной версией.
- Пользователи Azure Databricks без прав администратора могут считывать имена и идентификаторы пользователей и групп с помощью API SCIM
- API рабочей области возвращает идентификаторы объектов для записных книжек и папок
- Общедоступная версия Databricks Runtime 6.0 ML
- Новые регионы: Южная Бразилия и Центральная Франция
- Общедоступная версия Databricks Runtime 6.0
-
Сентябрь 2019 г.
- Завершается поддержка Databricks Runtime 5.2
- Запуск автоматических кластеров на основе пула, в которых используется Databricks Light (общедоступная предварительная версия)
- IP-адреса шлюза Базы данных SQL Azure изменяются с 14 октября 2019 г.
- Сквозная передача учетных данных Azure Data Lake Storage теперь поддерживается в стандартных кластерах и Scala (общедоступная версия)
- Пакеты DataFrame Pandas теперь отображаются в записных книжках без масштабирования
- Динамическое отображение селектора версий Python
- Databricks Runtime 6.0 (бета-версия)
-
Август 2019 г.
- Новый регион: Север ОАЭ
- Улучшение процесса установки библиотеки рабочей области
- В пользовательском интерфейсе кластеров теперь лучше упорядочена терминология, касающаяся интерактивных и автоматизированных кластеров
- Databricks Runtime 5.5 и Databricks Runtime 5.5 ML получают долгосрочную поддержку (LTS)
- Уведомления о выделении экземпляров для пулов
- Новые события кластера
- Обновления MLflow
-
Июль 2019 г.
- В ближайшее время: Databricks 6.0 не будет поддерживать Python 2
- Предварительная загрузка версии Databricks Runtime в свободных экземплярах пула
- Улучшено взаимодействие пользовательских тегов кластера и тегов пула
- MLflow 1.1 содержит несколько улучшений пользовательского интерфейса и API
- Пакет DataFrame Pandas преобразует данные для просмотра так же, как в Jupyter
- Новые регионы
- Обновленное ограничение подключения хранилища метаданных
- Задать разрешения для пулов (общедоступная предварительная версия)
- Databricks Runtime 5.5 для Машинного обучения
- Databricks Runtime 5.5
- Поддержка экземпляров пула в режиме ожидания для быстрого запуска кластера (общедоступная предварительная версия)
- Метрики Ganglia
- Глобальная согласованность цветов для рядов
- Июнь 2019 г.
- Май 2019 г.
-
Апрель 2019 г.
- MLflow в Azure Databricks (общедоступная версия)
- Delta Lake в Azure Databricks
- Боковая панель в MLflow
- Автоматически получить доступ к хранилищам Azure Data Lake Storage Gen1 и Gen2 с помощью учетных данных Microsoft Entra ID (GA)
- Databricks Runtime 5.3 (общедоступная версия)
- Databricks Runtime 5.3 ML (общедоступная версия)
- Март 2019 г.
- Февраль 2019 г.
-
Январь 2019 г.
- Предстоящее изменение: Python 3 станет по умолчанию при создании кластеров
- Выпуск Databricks Runtime 5.2 для Машинного обучения (бета-версия)
- Представление JSON для конфигурации кластера
- Пользовательский интерфейс кластера
- Развертывание Azure Databricks в виртуальной сети Azure (внедрение виртуальной сети)
- Пользовательский интерфейс библиотеки
- События кластера
- Управление версиями записной книжки с помощью Azure DevOps Services
- Декабрь 2018 г.
-
Ноябрь 2018 г.
- Пользовательский интерфейс библиотеки
- Включены пользовательские параметры памяти для кучи Spark
- Вытеснение контекста выполнения заданий и бездействия
- Выпуск Databricks Runtime 5.0 для Машинного обучения (бета-версия)
- Выпуск Databricks Runtime 5.0
-
Поддержка неограниченной загрузки содержимого сторонних разработчиков в
displayHTML
- Октябрь 2018 г.
- Сентябрь 2018 г.
- Август 2018 г.
-
Июль 2018 г.
- API библиотек поддерживает файлы колес Python
- Экспорт записных книжек IPython
- Области секретов с поддержкой Azure Key Vault
- Пробные рабочие области ценовой категории "Премиум"
- Режим кластера и кластеры с высокой степенью параллелизма
- управление доступом к таблице
- Недоступные типы узлов кластера теперь неактивны
- Поддержка R Markdown
- Изменение внешнего вида домашней страницы, добавление возможности перетаскивания файлов для импорта данных
- Поведение виджетов по умолчанию
- интерфейс создания таблиц
- Импорт данных в формате JSON с несколькими строками
- Июнь 2018 г.
-
Май 2018 г.
- Общий регламент по защите данных (GDPR)
- Пользователи Azure Databricks должны принадлежать клиенту Идентификатора Microsoft Entra
- HorovodEstimator
- MLeap ML Model Export (Экспорт модели Машинного обучения MLeap)
- Дополнительные типы кластеров GPU
- Ячейки записной книжки: скрытие и отображение
- Поиск по сайту документации
- Databricks Runtime 4.1 ML для Машинного обучения (бета-версия)
- Databricks Delta
- Поддержка Display() для типов данных изображений
- Типы кластеров GPU
- Общедоступная версия управления секретами
- Изменения в конечной точке API секретов и командах CLI
- Закрепление кластера
- Автоматический запуск кластера
- Очистка рабочей области
- Databricks CLI 0.7.1
-
Апрель 2018 г.
- Интерфейс командной строки секретов
- Руководства по глубокому обучению
- Обновление Secrets API для создания области секретов
- Советы, касающиеся ошибок Spark
- Databricks CLI 0.7.0
- Увеличение ограничения усечения выходных данных скрипта init
- API кластеров. Добавлен тип события UPSIZE_COMPLETED
- Автозавершение команд
- Бессерверные пулы обновлены до Databricks Runtime 4.0
-
Март 2018 г.
- Сведения о выполнении команды
-
Интерфейс командной строки Databricks поддерживает
--profile
- Списки ACL по умолчанию включены для новых клиентов ценовой категории "Премиум"
- Общедоступная версия службы Azure Databricks
- Новая тема сайта документации
- Автомасштабирование локального хранилища
- Пиринг виртуальных сетей
- Журнал событий кластера
- Databricks CLI: выпуск 0.6.0
- Управление выполнением заданий
- Для изменения разрешений кластера теперь требуется режим редактирования
- Экспорт модели Машинного обучения Databricks
-
Февраль 2018 г.
- Новый график поддерживает данные временных рядов
- Дополнительные улучшения визуализации
- Удаление выполнения заданий с помощью API заданий
- Обновлена библиотека KaTeX для отрисовки математических выражений
- Databricks CLI: выпуск 0.5.0
- Библиотека API DBUtils
- Фильтрация только своих заданий
- Отправка в Spark на странице создания задания
- выберите Python 3 на странице "Создание кластера"
- Улучшения пользовательского интерфейса рабочей области
- Автозавершение для команд SQL и имен баз данных
- Бессерверные пулы теперь поддерживают R
- XGBoost предоставляется в виде пакета Spark
- управление доступом к таблицам для SQL и Python (бета-версия)
- Январь 2018 г.