Июнь 2024 г.

Эти функции и улучшения платформы Azure Databricks были выпущены в июне 2024 года.

Примечание.

Выпуски являются поэтапными. Ваша учетная запись Azure Databricks может быть обновлена только через неделю или более после первоначальной даты выпуска.

Записные книжки — выделение синтаксиса вне порядка

16 июня 2024 г.

Ошибка синтаксиса Python, выделенная в записных книжках , теперь предупреждает пользователей об использовании переменных перед объявлением и предлагает исправление.

Помощник по записным книжкам автоматически диагностировать ошибки

16 июня 2024 г.

Помощник Databricks теперь автоматически диагностировать ошибки кода в записных книжках. Это использует генерированный ИИ для анализа кода и сообщения об ошибке, чтобы предложить исправление непосредственно в записной книжке. Дополнительные сведения см. в разделе Включение и использование помощника Databricks

Улучшения обозревателя каталогов

28 июня 2024 г.

В обозревателе каталогов были сделаны следующие улучшения:

• Добавлен раздел быстрого доступа, в котором отображаются последние объекты каталога Unity, избранные объекты каталога Unity, а также каталоги и схемы для просмотра.

• Удалена верхняя панель и структура аккордеона; точки входа для следующих элементов перемещены в меню иконки шестеренки на боковой панели, вместе с браузером схем, для более удобной навигации.

  • Выбор вычислений
  • Разностный общий доступ
  • Учетные данные для хранения
  • Внешние расположения
  • Связи
  • Просмотр DBFS

  Вы также можете получить доступ к Delta Sharing и внешним данным в верхней части Каталог Эксплорера над разделом быстрого доступа.

Обслуживание нескольких внешних моделей из одной конечной точки обслуживания модели

27 июня 2024 г.

Служба модели ИИ мозаики теперь поддерживает обслуживание нескольких внешних моделей на конечную точку обслуживания модели. См. статью "Обслуживание нескольких внешних моделей для конечной точки".

Помощник по Databricks теперь является общедоступной

27 июня 2024 г.

Помощник по Databricks выпускается как общедоступная версия. К возможностям помощника относятся следующие возможности:

• Создание, отладка, оптимизация и объяснение кода.
• Создание визуализаций из данных. См. статью "Создание визуализаций с помощью Помощника по Databricks".
• Отладка заданий (общедоступная предварительная версия).
• Код и изменение запросов SQL.
• Найдите соответствующую справку в документации по Azure Databricks и база знаний.

Дополнительные сведения см. в разделе "Что такое Помощник по Databricks?".

Помощник по Databricks теперь предоставляет названия потокам

27 июня 2024 г.

Чтобы упростить навигацию по потокам справки, Помощник Databricks заголовок потоков на основе контекста запроса.

См. включение и использование помощника Databricks.

Диспетчер среды бессерверных записных книжек

27 июня 2024 г.

Теперь можно установить зависимости Python для бессерверных записных книжек с помощью боковой панели среды , которая предоставляет одно место для редактирования, просмотра и экспорта требований к библиотеке для записной книжки. См. статью "Установка зависимостей записной книжки".

Консоль отладки записных книжек

27 июня 2024 г.

С помощью консоли отладки блокнота, вы можете теперь просматривать динамические значения переменных и выполнять фрагменты кода при отладке блокнота.

Быстрое добавление периодического расписания в рабочий процесс Azure Databricks

28 июня 2024 г.

Теперь можно добавить простое расписание в рабочий процесс Azure Databricks, указав только интервал и единицу времени (например, выполнение рабочего процесса каждые 4 часа). Этот новый тип расписания дополняет существующий расширенный тип расписания, позволяя добавить расписание всего несколькими щелчками мыши. См . статью "Выполнение заданий по расписанию".

Databricks Runtime 15.3 — общедоступная версия

24 июня 2024 г.

Databricks Runtime 15.3 и Databricks Runtime 15.3 ML теперь общедоступны.

См. Databricks Runtime 15.3 (EoS) и Databricks Runtime 15.3 для машинного обучения (EoS).

География Azure — это общедоступная версия

24 июня 2024 г.

География Azure теперь общедоступна. География Azure управляет расположением данных при обработке содержимого клиента для некоторых возможностей искусственного интеллекта.

Дополнительные сведения см. в разделе "Назначенные службы Databricks".

Новый улучшенный пользовательский интерфейс создания каталога

18 июня 2024 г.

Интерфейс создания нового каталога пошагово проводит вас через весь процесс создания и настройки каталога, предоставляя полезные подсказки и отделяя обязательные настройки от необязательных. Вы можете использовать тот же пользовательский интерфейс для создания стандартных, общих и внешних каталогов.

См. Создание каталогов.

Обновления подсетей в конфигурациях сетевого подключения

18 июня 2024 г.

Databricks обновляет подсети в конфигурациях сетевого подключения (NCCs) во всех регионах. Новые идентификаторы подсети автоматически добавляются в существующие правила брандмауэра служба хранилища Azure, разрешающие доступ из существующих идентификаторов подсети, чтобы обеспечить непрерывный доступ из Azure Databricks.

Если вы используете API конфигураций сетевого подключения, чтобы получить идентификаторы подсети и добавить их в правила сети хранения для новых учетных записей хранения Azure, вы не будете прерывать работу. Однако если вы жестко закодируете существующий набор идентификаторов подсети, вы можете столкнуться с нарушениями. Databricks рекомендует использовать API для получения последних сведений. См. API конфигураций сетевого подключения.

Возможно, вы столкнетесь с возможными перерывами в работе API конфигураций сетевого подключения в ходе обновления в период с 8:00 до 12:00 ночи по PDT 20 июня 2024 года.

Таблицы системы выставления счетов включены по умолчанию

18 июня 2024 г.

Схема system.billing теперь включена по умолчанию во всех рабочих областях каталога Unity. См. справочник по системной таблице выставления счетов.

Мониторинг Lakehouse — это общедоступная версия

13 июня 2024 г.

Мониторинг Databricks Lakehouse теперь общедоступен.

Общий доступ к томам с помощью разностного общего доступа теперь общедоступен

13 июня 2024 г.

Поддержка разностного общего доступа для совместного использования не табличных данных в качестве тома теперь является общедоступной. Вы можете совместно использовать тома между рабочими областями Databricks в разных хранилищах метаданных каталога Unity (включая рабочие области в разных учетных записях Databricks и различных облаках).

Объекты каталога Unity представляют собой логический объем хранилища в расположении облачного объектного хранилища. Они предназначены в первую очередь для управления ресурсами не табличных данных. Delta Sharing on Databricks обеспечивает встроенную интеграцию с каталогом Unity, которая позволяет управлять, управлять, проверять и отслеживать использование общих томов данных.

См. раздел Добавление томов в общую папку.

Управляемые клиентом ключи (CMK) для векторного поиска Databricks теперь являются общедоступной версии

12 июня 2024 г.

Ключи, управляемые клиентом (CMK) на конечных точках векторного поиска, теперь общедоступны.

Платформа агента ИИ Мозаики (общедоступная предварительная версия)

12 июня 2024 г.

Фреймворк агента ИИ Mosaic — это набор инструментов для Databricks, предназначенный для создания, развертывания и оценки промышленных приложений с дополненным извлечением информации (RAG). Agent Framework позволяет создавать или оптимизировать приложения LLM на одной платформе с помощью собственных данных.

Agent Framework включает следующие возможности:

• Создание и ведение журналов агентов и цепочек.
• Параметризуйте агенты и цепочки для быстрого эксперимента и итерации.
• Встроенные метрики для сравнения выполняются между получением соответствующих документов, точностью отклика и затратами и задержкой.
• Пользовательские судьи LLM для получения и точности ответа.
• Развертывание приложений ИИ с автоматическим ведением журнала запросов и ответов.
• Встроенное приложение проверки для получения отзывов пользователей.
• Оценка агента для оценки качества, задержки и стоимости создаваемых приложений ИИ.
• Трассировка MLflow для анализа и сравнения трассировок между выполнением кода.

Дополнительные сведения см. в статье RAG (получение дополненного поколения) в Azure Databricks.

Прогнозная оптимизация теперь является общедоступной

11 июня 2024 г.

Прогнозная оптимизация для управляемых таблиц каталога Unity теперь общедоступна. Прогнозная оптимизация теперь выполняется OPTIMIZE на таблицах с включенной функцией liquid-кластеризации для применения кластеризации. См. оптимизацию предсказаний для таблиц, управляемых Unity Catalog.

Оптимизация маршрутов доступна для обслуживания конечных точек

11 июня 2024 г.

Теперь можно создать оптимизированные для маршрутизации конечные точки обслуживания для обслуживания модели или рабочих процессов обслуживания компонентов. См. раздел "Настройка оптимизации маршрутов" для конечных точек обслуживания.

Поддержка обслуживания моделей с брандмауэром учетной записи хранения рабочей области

11 июня 2024 г.

Теперь служба моделей поддерживается с поддержкой брандмауэра для учетной записи хранения рабочей области. См. раздел "Включение поддержки брандмауэра для учетной записи хранения рабочей области".

Сопоставление столбцов теперь общедоступно в общем доступе.

10 июня 2024 г.

Сопоставление столбцов Delta Lake теперь общедоступно. Теперь можно использовать DROP FEATURE для отключения сопоставления столбцов и понижения уровня протокола таблицы. См. переименуйте и удалите столбцы с использованием сопоставления столбцов в Delta Lake.

Теперь доступны системные таблицы рабочих процессов (общедоступная предварительная версия)

10 июня 2024 г.

Схема system.lakeflow содержит четыре новых таблицы, которые можно использовать для мониторинга заданий в учетной записи. См. справочник по таблице системы заданий .

Если у вас нет доступа к этим системным таблицам, убедитесь, что в учетной записи включена схема system.lakeflow. См. включение схем системных таблиц.

Вызов функции — общедоступная предварительная версия

10 июня 2024 г.

Вызов функций теперь доступен в общедоступной предварительной версии. Эта функция доступна с помощью API-интерфейсов модели Foundation pay-per-token: DBRX Instruct and Meta-Llama-3-70B-Instruct. См . функцию, вызываемую в Azure Databricks.

Запрос индекса векторного поиска с помощью vector_search()

10 июня 2024 г.

Функции ИИ теперь поддерживают vector_search() , что позволяет запрашивать индекс векторного поиска Мозаики ИИ с помощью SQL. См . vector_search функцию.

Поиск вектора вектора мозаики теперь поддерживает гибридный поиск

7 июня 2024 г.

Поиск вектора вектора мозаики теперь поддерживает гибридный поиск по аналогии с ключевыми словами, который объединяет векторный поиск на основе векторов с традиционными методами поиска на основе ключевых слов. Этот подход соответствует точным словам в запросе, а также использует поиск сходства на основе векторов для отслеживания семантических связей и контекста запроса. Интегрируя эти два метода, гибридный поиск по аналогии с ключевыми словами извлекает документы, содержащие не только точные ключевые слова, но и те, которые концептуально похожи, предоставляя более полные и соответствующие результаты поиска. Дополнительные сведения см. в разделе "Поиск вектора искомого вектора" в мозаике.

GTE теперь поддерживается в службе обслуживания моделей

7 июня 2024 г.

Служба модели ИИ мозаики теперь поддерживает внедрение общего текста (GTE) — модель внедрения текста, которая может сопоставить текст с вектором внедрения. GTE поддерживается как часть API-интерфейсов модели Foundation и доступна в регионах конечных точек обслуживания маркеров с оплатой за токен. См. сведения об использовании API-интерфейсов модели Foundation.

Помощник по Databricks: потоки и запросы, включенные по умолчанию

6 июня 2024 г.

Помощник по Databricks (общедоступная предварительная версия) теперь отслеживает потоки запросов и журнал в контекстах редактора в сеансе по умолчанию. Вы можете управлять включением для всех рабочих областей в учетной записи или отдельных рабочих областях.

Дополнительные сведения см. в разделе "Что такое Помощник по Databricks?"

Улучшенный редактор записной книжки Markdown

5 июня 2024 г.

Теперь вы можете просмотреть динамическую предварительную версию ячеек Markdown в записных книжках и получить доступ к панели инструментов для распространенных элементов Markdown, таких как заголовки, списки и ссылки. Проводите больше времени, сообщая свои идеи и меньше времени запоминая синтаксис.

Быстрый доступ к таблицам обозревателя каталогов из записных книжек

5 июня 2024 г.

Теперь вы можете легко получить доступ к таблицам обозревателя каталогов непосредственно из записных книжек. Наведите указатель мыши на имя таблицы в ячейке записной книжки, чтобы получить ссылку на страницу обозревателя каталога, чтобы просмотреть сведения, такие как столбцы, разрешения и многое другое.

Драйвер ODBC Databricks 2.8.2

4 июня 2024 г.

Теперь доступен драйвер ODBC Для Databricks версии 2.8.2. В этом выпуске добавлены следующие новые функции и улучшения:

• Теперь клиенты могут использовать расширенные команды SQL PUT, GETи REMOVE для приема больших наборов данных в томах каталога Unity и управления ими.
• Теперь значения конфигурации OAuth по умолчанию обновляются и соответствуют требованиям. Обновленные параметры конфигурации включают конечную точку авторизации, идентификатор клиента OAuth, область "Пользователь — компьютер" и область "Компьютер — компьютер" OAuth. Дополнительные сведения см. в заметках о выпуске.
• Сторонние библиотеки были обновлены, включая эмигранта 2.6.2 (ранее 2.6.0) и libCURL 8.7.1 (ранее 8.6.0).
• Теперь драйвер принимает частный подписанный центр сертификации (ЦС), если он добавляется в хранилище сертификатов доверенного корневого ЦС Windows.

Этот выпуск также устраняет следующие проблемы:

• Клиент ранее вернул ошибку, если длина комментария таблицы превысила MaxCommentLen. Теперь примечание таблицы по умолчанию усечено в соответствии с ограничением, указанным в MaxCommentLen.
• Клиент ранее вернул ошибку при выполнении SQLCancel в определенных обстоятельствах.

Новый пользовательский интерфейс Записной книжки Databricks теперь общедоступен

4 июня 2024 г.

Новый пользовательский интерфейс Databricks Notebooks предоставляет разработчикам упрощенный и ориентированный на данные интерфейс разработки. Ключевые возможности:

• Современный UX: наслаждайтесь упрощенным интерфейсом программирования с обновленным пользовательским интерфейсом и другими функциями для улучшения организации записных книжек.
• Новая таблица результатов: Осуществляйте исследование данных без программирования с возможностями поиска и фильтрации непосредственно в результатах.