Автоматическое поиск функций с помощью Службы моделей Databricks
Сервис моделей может автоматически находить признаки values из опубликованных онлайн-магазинов или из интернет-tables. Дополнительные сведения о создании и работе с онлайн-tablesсм. в статье Использование tables в режиме реального времени для обслуживания.
Требования
- Модель должна быть зарегистрирована в
FeatureEngineeringClient.log_model(для проектирования компонентов в Unity Catalog) илиFeatureStoreClient.log_model(для устаревшего хранилища компонентов рабочей области), требуется версия 0.3.5 и более поздней версии. - Для сторонних интернет-магазинов интернет-магазин должен быть опубликован как только для чтения с credentials.
Примечание.
Вы можете опубликовать функцию table в любое время до развертывания модели, включая после обучения модели.
Автоматический поиск признаков
Служба моделей Azure Databricks поддерживает автоматический поиск функций из следующих интернет-магазинов:
- Databricks Online Tables
- Azure Cosmos DB (версия 0.5.0 и выше)
Автоматический поиск признаков поддерживается для следующих типов данных:
IntegerTypeFloatTypeBooleanTypeStringTypeDoubleTypeLongTypeTimestampTypeDateTypeShortTypeDecimalTypeArrayTypeMapType
Переопределение функции values в онлайн-оценке модели
Все функции, необходимые модели (вошедшей FeatureEngineeringClient.log_model в систему или FeatureStoreClient.log_model) автоматически просматриваются из интернет-магазинов для оценки моделей. Чтобы переопределить характеристику values при оценке модели с помощью службы моделей по REST API, включите характеристику values в полезные данные API.
Примечание.
Новая функция values должна соответствовать типу данных компонента, как ожидалось базовой моделью.
Примеры ноутбуков : Unity Catalog
При использовании Databricks Runtime 13.3 LTS и более поздних версий любую Delta table в Unity Catalog с первичным ключом можно использовать в качестве признака table. При использовании table, зарегистрированного в Unity Catalog в качестве функции table, все возможности Unity Catalog автоматически доступны этой функции table.
В следующей записной книжке показано, как публиковать функции в Интернете tables для обслуживания в режиме реального времени и автоматического поиска функций.
Демонстрационная записная книжка tables в Интернете
В этом примере записной книжки показано, как публиковать функции в интернет-магазине, а затем обслуживать обученную модель, которая автоматически ищет функции в интернет-магазине.
Пример записной книжки стороннего интернет-магазина (Unity Catalog)
Примеры записных книжек: хранилище компонентов рабочей области (устаревшая версия)
В этом примере записной книжки показано, как публиковать функции в интернет-магазине, а затем обслуживать обученную модель, которая автоматически ищет функции в интернет-магазине.