Январь 2025 г.

Эти функции и улучшения платформы Azure Databricks были выпущены в январе 2025 года.

Заметка

Выпуски выпускаются поэтапно. Учетная запись Azure Databricks может не обновляться до недели или более после начальной даты выпуска.

Улучшения выходных данных записной книжки

23 января 2025 г.

В опыт работы с результатами записной книжки внесены следующие улучшения:

• Является одним из фильтров: В таблице результатов теперь можно отфильтровать столбец с помощью Является одним из и выбрать значения, для которого требуется отфильтровать. Для этого щелкните меню рядом с столбцом и щелкните Фильтр. Модал фильтра откроется для добавления условий, которые необходимо отфильтровать. Дополнительные сведения о фильтрации результатов см. в разделе Фильтрация результатов.
• Копирование таблицы результатов как: теперь можно скопировать таблицу результатов в формате CSV, TSV или Markdown. Выберите данные, которые нужно скопировать, а затем щелкните правой кнопкой мыши, выберите Копировать каки выберите нужный формат. Результаты копируются в буфер обмена. См. Копировать данные в буфер обмена.
• Именование скачивания: При скачивании результатов ячейки название файла теперь соответствует названию тетради. См. результаты загрузки .

Быстрое время загрузки записной книжки

23 января 2025 г.

При первом открытии записной книжки начальная загрузка теперь происходит до 26% быстрее для записной книжки, содержащей 99 ячеек, и до 6% быстрее для записной книжки с 10 ячейками.

Блокноты теперь поддерживаются как файлы рабочей среды

23 января 2025 г.

Записные книжки теперь поддерживаются в качестве файлов рабочей области. Теперь вы можете программно записывать, читать и удалять записные книжки так же, как и любой другой файл. Это позволяет программно взаимодействовать с записными книжками везде, где доступен файловый ресурс рабочей области. Сведения о файлах рабочей области см. в разделе Что такое файлы рабочей области?. Сведения о преобразовании файла в записную книжку см. в разделе Импорт файла и его преобразование в записную книжку.

Записные книжки: журнал чата Databricks Assistant доступен только пользователю, который инициирует его

22 января 2025 г.

В блокноте история чата Databricks Assistant доступна только пользователю, который инициировал чат. Дополнительные сведения о конфиденциальности и безопасности Ассистента см. в Privacy and security.

Сбор статистики теперь автоматизирован с помощью прогнозной оптимизации

22 января – 30 апреля 2025 г.

Прогнозная оптимизация теперь автоматически вычисляет статистику для управляемых таблиц каталога Unity во время записи в управляемые таблицы и автоматические задания обслуживания. См. прогнозную оптимизацию для управляемых таблиц каталога Unity.

Обновление пользовательского интерфейса Databricks Marketplace и Partner Connect

21 января 2025 г.

Мы упростили боковую панель путем объединения Partner Connect и Marketplace в одну ссылку Marketplace. Новая ссылка Marketplace размещается выше на боковой панели для упрощения доступа.

Драйвер JDBC Databricks 2.7.1

16 января 2025 г.

Драйвер Databricks JDBC версии 2.7.1 теперь можно скачать со страницы загрузки драйвера JDBC.

Этот выпуск включает следующие улучшения и новые возможности:

• Добавлено новое свойство OAuthEnabledIPAddressRanges, позволяющее клиентам переопределить порты обратного вызова OAuth по умолчанию, упрощая получение маркера OAuth в средах с ограничениями сетевого порта.
• Теперь доступна поддержка токенов обновления. Это позволяет драйверу автоматически обновлять маркеры проверки подлинности с помощью свойства Auth_RefreshToken.
• Добавлена поддержка использования доверенного хранилища системы с добавлением нового свойства UseSystemTrustStore. Если этот параметр включен (UseSystemTrustStore=1), драйвер проверяет подключения с помощью сертификатов из доверенного хранилища системы.
• Добавлено свойство UseServerSSLConfigsForOAuthEndPoint, которое при включении позволяет клиентам совместно использовать конфигурацию SSL драйвера для конечной точки OAuth.
• Обычная проверка подлинности теперь отключена по умолчанию. Чтобы повторно включить его, задайте для свойства allowBasicAuthentication значение 1.

Этот выпуск устраняет следующие проблемы:

• Символы Юникода при использовании IBM JRE с функцией сериализации результирующих наборов Arrow теперь обрабатываются правильно.
• Теперь возвращаются полные сообщения об ошибках и причины кода ошибки 401.
• Теперь обработчики загрузки облака освобождаются после завершения.
• Потоки heartbeat больше не утекают при создании соединений через класс DataSource.
• Устранена потенциальная утечка OAuth2Secret в журнале драйверов.
• Идентификаторы запросов в журнале драйверов больше не отсутствуют.
• Использование кэша токенов OAuth больше не вызывает ошибку несоответствия тегов.

Этот выпуск включает обновления до нескольких сторонних библиотек для устранения уязвимостей:

• arrow-memory-core версии 17.0.0 (ранее 14.0.2)
• arrow-vector 17.0.0 (ранее 14.0.2)
• Arrow-Format 17.0.0 (ранее 14.0.2)
• arrow-memory-netty 17.0.0 (ранее 14.0.2)
• arrow-memory-unsafe 17.0.0 (ранее 14.0.2)
• commons-codec 1.17.0 (ранее 1.15)
• flatbuffers-java 24.3.25 (ранее 23.5.26)
• джексон-заметки-2.17.1 (ранее 2.16.0)
• джексон-core-2.17.1 (ранее 2.16.0)
• джексон-databind-2.17.1 (ранее 2.16.0)
• jackson-datatype-jsr310-2.17.1 (ранее 2.16.0)
• netty-buffer 4.1.115 (ранее 4.1.100)
• netty-common 4.1.115 (ранее 4.1.100)

Полные сведения о конфигурации см. в руководстве по драйверу JDBC Databricks JDBC, установленному с пакетом загрузки драйвера.

Федерация Lakehouse поддерживает Teradata (общедоступная предварительная версия)

15 января 2025 г.

Теперь можно выполнять федеративные запросы к данным, управляемым Teradata. См. "Запуск федеративных запросов на Teradata" .

Выпуск SDK databricks-agents версии 0.14.0: настраиваемые метрики оценки

14 января 2025 г.

При использовании databricks-agents==0.14.0, Оценка агента Mosaic AI теперь поддерживает пользовательские метрики, позволяя пользователям определять метрики оценки, адаптированные к их конкретному бизнес-случаю использования GenAI.

Этот выпуск также добавляет поддержку:

• ChatAgent и ChatModel из жгута mlflow.evaluate(model_type='databricks-agent').
• Использование mlflow.evaluate(model_type='databricks-agent') из-за пределов записной книжки Databricks при проверке подлинности с помощью databricks CLI.
• Поддержка вложенных RETRIEVAL диапазонов в трассировках агента.
• Поддержка простого массива словарей в качестве аргумента data для mlflow.evaluate().
• Более простой stdout при выполнении mlflow.evaluate().

Теперь шлюз ИИ поддерживает подготовленную пропускную способность (общедоступная предварительная версия)

10 января 2025 г.

шлюза ИИ мозаики теперь поддерживает api-интерфейсы azure Foundation Model, подготовленные рабочих нагрузок на конечных точках обслуживания моделей.

Теперь вы можете включить следующие функции управления и мониторинга в конечных точках обслуживания модели, которые используют подготовленную пропускную способность:

• Разрешения и ограничение скорости для контроля того, у кого есть доступ и насколько велик этот доступ.
• Журналирование полезной нагрузки для отслеживания и аудита данных, отправляемых в API модели с помощью инференс-таблиц.
• отслеживание использования для мониторинга операционного использования на конечных точках и связанных затрат с помощью системных таблиц .
• Защитные меры ИИ для предотвращения появления нежелательных и небезопасных данных в запросах и ответах.
• управления маршрутизацией трафика для минимизации перебоев в производстве во время и после развертывания.

Поддержка серии Databricks Runtime 15.2 заканчивается

7 января 2025 г.

Поддержка Databricks Runtime 15.2 и Databricks Runtime 15.2 для машинного обучения закончилась 7 января. См. жизненные циклы поддержки Databricks .

Поддержка серии Databricks Runtime 15.3 заканчивается

7 января 2025 г.

Поддержка Databricks Runtime 15.3 и Databricks Runtime 15.3 для машинного обучения закончилась 7 января. См. жизненные циклы поддержки Databricks .

Meta Llama 2, 3 и Code Llama выходят из семейства моделей с доработкой на базе Foundation Model.

7 января 2025 г.

Следующие семейства моделей были выведены из эксплуатации и больше не поддерживаются на настройке базовой модели. См. устаревших моделей для информации о рекомендуемых моделях замены.

• Мета-Лама-3
• Мета-Лама-2
• Код Лама