Примечания о выпуске Индексатора видео Azure AI

Просмотрите эту страницу, чтобы просмотреть последние обновления.

Чтобы оставаться в курсе последних разработок индексатора видео Azure AI, в этой статье приведены сведения о следующих возможностях:

• Последние выпуски.
• Известные проблемы
• Исправления ошибок
• Нерекомендуемые функции.

Март 2025 г.

Поддержка индексатора видео Azure для конфиденциальных конечных точек

Теперь общедоступна поддержка индексатора видео Azure для частных конечных точек. Благодаря этому организации могут повысить безопасность с помощью частных конечных точек, чтобы клиенты в виртуальной сети могли безопасно получать доступ к данным через приватный канал. Это обеспечивает частный трафик данных через магистральную сеть Майкрософт, а не при использовании общедоступных конечных точек. Дополнительные сведения см. в статье Частные конечные точки в индексаторе видео Azure AI.

Февраль 2025 г.

Добавлены индонезийские и литовские языки в качестве исходных языков

Мы добавили поддержку видео с использованием индонезийских и литовских исходных языков. Список поддерживаемых языков см. в поддержке языков в Индексаторе видео Azure.

Изменение URL-адреса для файла мини-приложения mediator.js

Индексатор видео Azure AI изменил URL-адрес для доступа к файлу mediator.js, что позволяет внедренным видеопроигрывателем и мини-приложениям аналитических сведений взаимодействовать. Если веб-сайт использует файл mediator.js, рекомендуется обновить URL-адрес до 1 мая. Старый URL-адрес перестает работать 1 мая, после чего проигрыватель и мини-приложения аналитики не смогут взаимодействовать.

Старый URL-адрес mediator.js: https://breakdown.blob.core.windows.net/public/vb.widgets.mediator.js

Новый URL-адрес mediator.js: https://aka.ms/vi-mediator-file

Дополнительные сведения см. в разделе Внедрение виджетов в вашем приложении или блоге.

Мультимодальное суммирование видео теперь в общем доступе.

Мультимодальное резюмирование видео теперь доступно в общедоступной версии для Azure Video Indexer. Эта функция использует новейшие технологии LLM и SLM, такие как Azure Open AI и Phi, для предоставления комплексных сводок видеоконтента путем объединения аналитических сведений из нескольких модальностей, включая аудио, визуальный и текстовый текст.

Январь 2025 г.

Сводка многомодальных видео с помощью GPT-4o

Наша многомодальная сводка видео теперь поддерживает GPT-4o, создавая более точные сводки. Чтобы использовать многомодальную сводку видео, см. раздел Текстовое суммирование.

Усовершенствованная многомодальная текстовая сводка видео с ключевыми кадрами

Мы добавили усовершенствования в функцию многомодальной текстовой аннотации видео. Обновленная логика теперь лучше захватывает видеоконтент, интегрируя более релевантные ключевые кадры, что приводит к более точным сводкам.

Добавлен филиппинский язык в качестве исходного языка

Мы добавили поддержку видео с помощью исходного языка Филиппин. Список поддерживаемых языков см. в поддержке языков в Индексаторе видео Azure.

Добавлен параметр распознавания знаков препинания в аудио

Мы добавили новый необязательный параметр, punctuationMode, в наши API Upload и Reindex. Этот параметр определяет, следует ли явно распознавать знаки препинания при транскрибации звука. Например, произнесенное слово "период" будет транскрибировано как период"." и "точка точка точка" в виде многоточия "...". Дополнительные сведения см. на портале разработчика .

Декабрь 2024 г.

Обновления политики фильтров для многомодальной сводки видео с помощью Azure Open AI

Мы обновили нашу политику, касающуюся фильтров вредоносного контента в многомодальной текстовой сводке видео. Эти фильтры больше не являются обязательными, хотя мы по-прежнему рекомендуем настроить их, чтобы обеспечить блокировку вредного содержимого. Если вы хотите полностью отключить вредоносные фильтры содержимого, зарегистрируйтесь в следующей форме: Azure OpenAI Limited Access Review: Modified Content Filtering.

Кроме того, текстовая аннотация видеороликов теперь поддерживает фильтр "Защитные щиты" для прямых атак (джейлбрейк). Мы рекомендуем добавить этот фильтр в развертывание системы.

Дополнительные сведения о фильтрах, необходимых для получения сведений о многомодальных видео с помощью Azure Open AI, см. в статье Использование текстовых сводных данных.

Ноябрь 2024 г.

Краткий обзор многомодального видео — облако и периферия

Мы рады представить многомодальную видеоаналитику, которая улучшает нашу текстовую сводку видео за счет анализа ключевых кадров, а также аудио- и видеоданных. Эта функция доступна как в облаке, работающем на базе Azure OpenAI, так и на периферийных устройствах в составе VI, поддерживаемого ARC. Он использует последнюю визуальную модель Phi3.5, которая может быть настроена для запуска с графическими процессорами для повышения производительности.

API расширенного содержимого запроса

Наш API видео-текста, также известный как API содержимого запроса, теперь поддерживает больше моделей: Llama2, Phi3, Phi3.5, GPT-4O и GPT-4O Mini. Это улучшение обеспечивает большую гибкость при преобразовании видеоконтента в текст и открывает дополнительные возможности при использовании Индексатора видео Azure. Вы можете собирать сведения из Индексатора видео Azure в формате запроса, который можно настроить, выбрав имя модели и изменив стиль запроса. Стиль "Обобщённый" идеально подходит для задач, таких как сводки видео, именование видео и описание основных событий, в то время как стиль "Полный" более подходит для таких случаев использования, как вопросы и ответы (Q&A), RAG и поиск. Дополнительные сведения об этом API см. в разделе Операции и содержимое запроса Azure Video Indexer.

Октябрь 2024 г.

Новый пример кода

Мы добавили новый пример кода для экспорта данных из Azure AI Video Indexer в Azure Data Explorer с использованием Logic Apps.

Август 2024 г.

Усиленная защита для текстового резюмирования видео

Текстовая сводка видео теперь включает функции предотвращения рисков джейлбрейк-атаки. Этот новый фильтр безопасности должен быть добавлен в ваш AOAI, чтобы воспользоваться текстовым видеорезюмированием на основе языковой модели. Дополнительные сведения см. в разделе "Сводка по текстовому видео" с помощью Azure OpenAI.

Сводка текста видео на устройстве на периферии

Мы выпустили запись блога Индексатор видео Azure AI & Phi-3 представляет текстовую сводку видео на платформе edge: История о совместной работе

Июль 2024 г.

Текстовая сводка на VI, поддерживаемая Arc

Возможность текстового суммирования теперь доступна на VI, включённом при помощи расширения Arc, используя последнюю модель Phi 3. Вы можете воспользоваться теми же функциями, что и в облаке, включая настройку сводки с несколькими параметрами: формальные, случайные, короткие и длинные.

Улучшения идентификации языка

• Улучшены скорость и качество идентификации на одном языке.
• Если в файле есть несколько языков (и вы попросили идентификацию одного языка):
  • Самый доминирующий язык, язык, который появился в течение наибольшей длительности, возвращается.
  • Артефакт содержит все языки, которые были определены речью в исходном видео.
• Расшифровка включает только строки наиболее доминирующего языка и исключает строки, содержащие разные языки.

Улучшения проигрывателя и доступности

Проигрыватель веб-сайта был обновлен до последней версии базы Shaka. Проигрыватель также включен в мини-приложения.

Улучшения доступности были реализованы для веб-сайта.

Июнь 2024 г.

Примеры кода

• Используйте индексатор Видео Azure с Microsoft Azure OpenAI, чтобы упростить поиск соответствующего видеоматериала для учащихся и преподавателей. См. запись блога по улучшению интерфейса поиска обучения с помощью индексатора видео Azure AI и исходного кода.
• Используйте Azure LogicApps для классификации автомобилей, обнаруженных в видео. В этом примере используется возможность «Bring Your Own» индексации видео для обнаружения объектов и GPT-4 от Azure OpenAI для расширенной классификации. Просмотрите демонстрацию YouTube и пример кода.

Увеличение ограничения длительности файла

Все предустановки теперь поддерживают индексирование файлов до 6 часов (предыдущее ограничение было 4 часа), а предварительная версия "Базовый звук" поддерживает индексирование файлов до 12 часов в длину.

Май 2024 г.

Текстовое резюмирование

Индексатор видео в Azure теперь содержит краткие сводки о том, о чем видео идет без просмотра всего видео. Это может сэкономить вам время, обрабатывая длинные видео и предоставляя вам суть в более коротком формате. Он превращает длинные видео в краткие и легко воспринимаемые сводки.

В нем используются алгоритмы сводных данных для выявления наиболее релевантных аналитических сведений для видео. Она включает в себя оценку аналитических сведений на основе их важности и релевантности к общей теме. Удобный интерфейс позволяет вводить видео и настраивать нужный тип сводки.

Вы можете настроить сводку, выбрав "Короткий", "Длинный", "Формальный" или "Случайный" и указать развертывание конкретной модели.

Дополнительные сведения о текстовой суммации см. в разделе "Обзор текстовой сводки".

Интеграция Azure OpenAI

Индексатор видео Azure теперь предлагает интеграцию с Azure OpenAI. Вы можете подключить ресурс Azure OpenAI при создании новой учетной записи Индексатора видео Azure или добавить ее в существующую учетную запись Индексатора видео Azure. При подключении VI к Azure OpenAI можно использовать возможность сводки текста, доступную из API и на портале.

Для получения дополнительной информации о подключении Azure OpenAI к вашей учетной записи VI см. в статье "Создание или обновление учетной записи Azure AI Video Indexer с подключением Azure OpenAI".

Расширение API контента запроса

Интерфейс запроса содержимого в Индексаторе видео Azure теперь поддерживает больше языковых моделей: Phi 2, Llama и GPT 4V. Использование API ввода контента с GPT 4V выводит ключевые кадры, которые могут анализироваться языковой моделью вместе с другими аналитическими данными.

Апрель 2024 г.

Исключите модели

Теперь вы можете исключить модели при индексировании с помощью веб-сайта VI и API. При отправке видео в индекс, выберите предустановки "Дополнительные параметры>индексирования", а затем выберите модели ИИ, которые будут исключены из результатов индексирования. Это может обеспечить более эффективное индексирование и результаты VI, содержащие только интересующие вас аналитические сведения.

Новый регион доступности

Индексатор видео в Azure AI теперь доступен в западной части Германии.

Февраль 2024 г.

Учетные записи без AMS и рекомендации по миграции

• Все новые видеопакеты, потоковая передача и кодирование для учетной записи VI выполняются VI, и вы больше не сможете создавать учетные записи VI, основанные на AMS. См. руководство по созданию новой учетной записи.
• Кодировка и упаковка VI тарифицируется по фиксированной ставке в один цент за минуту с бесплатной потоковой передачей.
• Вы можете обновить свои учетные записи VI на основе AMS до нового типа учетной записи без AMS.
• Вы можете принять участие в повторной обработке и переносе ресурсов AMS VI, чтобы вы могли продолжать получать доступ к видео и аналитическим сведениям. Миграция начинается в конце марта.
• Веб-приложения индексатора видео и мини-приложения используют новый проигрыватель мультимедиа, который является высокопроизводительным и больше не использует Azure Медиаплеер.

В следующей документации описан процесс миграции учетных записей и активов.

• См. новую версию API.

Поддержка TLS1.3

Мы поддерживаем TLS 1.3, последнюю версию протокола TLS, которая шифрует данные для обеспечения безопасного канала связи между двумя конечными точками.

Индексатор видео Azure AI, развернутый в центрально-западной швеции и западной части США

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в регионах Центральная Швеция и Западная часть США.

Январь 2024 года

Новое содержимое запроса LLM

Теперь вы можете подключить аналитику видео к крупной языковой модели (LLM) для таких задач, как сводка и ответы на вопросы. API преобразует аналитические сведения о видео в текстовый формат, готовый к запросу, для использования с LLM. Дополнительные сведения см. в статье Индексатор видео Azure AI с подсказками LLM.

Декабрь 2023 г.

Новый параметр предустановки — Базовый видео

Индексатор видео добавил новый параметр предустановки индексирования , Basic Video. Он также доступен в VI, активированном расширением Arc. Это вариант индексирования с низкой стоимостью, который включает множество полезных аналитических сведений искусственного интеллекта, включая OCR, обнаружение объектов и визуальные метки. Базовое видео можно использовать для создания аналитических сведений совместно с Базовым звуком (Базовое аудио и видео) или самостоятельно (только Базовое видео). Дополнительные сведения о параметрах индексирования см. в руководстве по настройке индексирования.

Получение API кадров

Теперь можно извлечь кадры из индексированного видео для выбранного раздела видео, выполнив FramesSasUrls запрос. Дополнительные сведения см. в FrameSelection.

Обновления функции «Использование собственной модели» (предварительная версия)

• Добавлена поддержка пользовательского интерфейса для пользовательской аналитики.
• Добавлена поддержка поиска для пользовательской аналитики.

Дополнительные сведения см. в разделе "Создание собственной модели ИИ".

Поиск по объекту на веб-сайте и API Индексатора видео Azure AI

Теперь вы можете использовать функцию поиска для поиска видео с определенными объектами (например, автомобилями, мотоциклами и многое другое) на веб-сайте Индексатора видео Azure ИИ или с помощью запроса поиска .

Ноябрь 2023 г.

Индексатор видео выпустил следующие вещи в ноябре:

Индексатор видео на платформе Azure AI при поддержке Arc (предварительная версия)

Индексатор видео можно использовать для гибридных сценариев, размещая его локально в кластере Kubernetes. Дополнительные сведения см. в обзоре Индексатора видео Azure AI на основе Arc. Вы также можете попробовать расширение, следуя руководству.

Создание собственной модели (предварительная версия)

Вы можете использовать собственную настраиваемую модель ИИ и интегрировать данные с моделями индексатора видео. Дополнительные сведения см. в статье "Создание собственной модели ИИ".

Пользовательские теги и бесплатный текст на видео (предварительная версия)

Вы можете добавить настраиваемые теги и бесплатный текст в виде метаданных видео в любое видео в учетной записи Индексатора видео. Это позволяет классифицировать и аномировать видео с любой информацией, которая относится к вам и вашему бизнесу. Например, можно добавить теги, такие как "демонстрация продукта", "отзывы клиентов", "внутренний учебный курс" или бесплатный текст, например "Это видео показывает, как использовать нашу новую функцию X" или "Это видео было записано на нашей ежегодной конференции в Y". Их можно добавить в область под видео после индексирования видео.

Поиск на основе пользовательских тегов и свободного текста (предварительная версия)

Вы можете искать видео на основе пользовательских тегов и свободного текста. Это позволит вам найти видео, соответствующие вашим критериям, проще и быстрее. Вы можете выполнять поиск на основе пользовательских тегов и свободного текста на всех поддерживаемых языках, а также объединять их с другими фильтрами поиска, такими как ключевые слова, лица, метки, эмоции и т. д. Для выполнения более сложных запросов можно также использовать расширенный синтаксис поиска. Например, можно найти видео с тегом "Демонстрация продукта" и бесплатным текстом "feature X".

Мы добавили много улучшений в настраиваемую модель людей, которая улучшает общий опыт и точность. Модели людей — это модели искусственного интеллекта, позволяющие обучить собственную модель для распознавания конкретных людей в видео. Новые дополнения:

Оценка качества модели людей (предварительная версия)

Вы можете получить указание на качество вашей настраиваемой модели "Люди" (плохой, справедливой, хорошей). Качество определяется количеством изображений, используемых для маркировки; чем больше изображений, используемых для маркировки человека, тем выше вероятность правильной идентификации человека. Например, вероятность идентификации человека с 24 помеченными изображениями выше вероятности идентификации человека с 2 помеченными изображениями. Вы можете увидеть количество изображений, используемых для маркировки каждого пользователя на странице настраиваемой модели "Люди".

Выбор пользовательской модели людей в качестве стандартной (предварительная версия)

Теперь вы можете выбрать индивидуальную модель для работы с людьми в качестве значения по умолчанию для уровня пользователя учетной записи VI, чтобы вам не приходилось каждый раз выбирать имя модели при загрузке видео. Это позволяет сэкономить время и усилия при отправке видео, которые необходимо проанализировать с помощью настраиваемой модели "Люди".

Группировка неизвестных людей в видео (предварительная версия)

Вы можете увидеть неизвестных людей в своих видео, сгруппированных по сходству их внешности. Это помогает пометить неизвестных людей быстрее и быстрее, а также повысить точность настраиваемой модели "Люди". Вы можете просмотреть группирование неизвестных людей на странице > настройки, затем выберите люди и перейдите на вкладку неизвестные люди. Это может, например, помочь вам идентифицировать местную знаменитость или местного политика.

Результаты поиска с максимальной оценкой достоверности для идентифицированного имени пользователя (предварительная версия)

Вы можете найти имя идентифицированного человека и определить, когда он появляется в видео, с максимальным коэффициентом уверенности. Это поможет вам решить, какие наиболее важные видео для изучения. Например, вы можете найти "Джон Смит" и получить видео, где Джон Смит распознается вашей настраиваемой моделью "Люди", а также оценку достоверности для каждого видео.

Избегайте дублирующихся отправок на индексацию

Иногда вы непреднамеренно отправляете одно и то же задание индексирования несколько раз. Чтобы избежать этого, добавлен preventDuplicatesновый необязательный параметр запроса. Если задано значение true, служба отклоняет отправку файла и сообщает о конфликте, если он уже индексирован.

Повторяющиеся проверки URL-адреса отправки зависят от ответа сервера заголовка Content-md5, если существует RFC 1864: поле заголовка Content-MD5, так как оно часто используется поставщиками хранилища.

Если вы хотите повторно отправить одно и то же видео, можно задать для параметра falseзначение .

Октябрь 2023

Новая идея — обнаружение объектов

Индексатор видео добавил новую аналитику обнаружения объектов в стандартную и расширенную предустановки видео. Его можно использовать для идентификации и отслеживания широкого спектра объектов, отображаемых в видео. Дополнительные сведения см. в обзоре обнаружения объектов Индексатора видео в Azure AI.

Сентябрь 2023

Изменения, связанные с выходом на пенсию AMS

В результате запланированного на 30 июня 2024 г. вывода из эксплуатации служб мультимедиа Azure (AMS), Индексатор видео объявил о многих связанных прекращениях работы. Они включают закрытие 30 июня 2024 года классических учетных записей Индексатора видео, изменения API и прекращение поддержки адаптивного битрейта. Полные сведения см. в статьеОб изменениях, связанных с выходом на пенсию службы мультимедиа Azure (AMS).

Июль 2023 г.

Редактируйте лица с помощью Azure AI Video Indexer API

Теперь вы можете отредактировать лица с помощью API индексатора видео Azure. Дополнительные сведения см. в статье Распознавание лиц Redact с помощью API индексатора видео Azure.

Увеличение ограничения запросов API

Индексатор видео увеличил ограничение запросов API с 60 запросов в минуту до 120.

Июнь 2023 г.

Объявлено о прекращении работы служб мультимедиа Azure.

Май 2023 г.

Обновления API

Мы представляем изменение поведения, которое может потребовать изменения в существующей логике запроса. Изменение находится в API списка и поиска , найдите подробное изменение между текущим и новым поведением в следующей таблице. Может потребоваться обновить код, чтобы использовать новые API .

API (Интерфейс программирования приложений)	Текущий	Новый	Обновление
Список видео	• Вывод списка всех видео-проектов в соответствии с логическим параметром IsBase. Если значение IsBase не определено, укажите оба значения. • Возвращает видео во всех состояниях (выполняется/обработано/ошибка).	• API перечисления видео будет возвращать только видео (с разбиением по страницам) во всех состояниях. • API списка проектов возвращает только проекты (с разбиением по страницам).	• API списков видео был разделен на два новых API: Список Видео и Список Проектов • Параметр IsBase больше не имеет значения.
Поиск видео	• Выполните поиск по всем видео/проектам в соответствии с логическим параметром IsBase. Если параметр IsBase не определен, выполните поиск в обоих случаях. • Поиск видео во всех состояниях (выполняется/обработано/неудача).	Поиск только обработанных видео.	• API поиска видео будет выполнять поиск только видео, а не проектов. • Параметр IsBase больше не имеет значения. • API поиска видео будет выполнять поиск только обработанных видео (и не неудавшихся или находящихся в процессе).

Поддержка HTTP/2

Добавлена поддержка HTTP/2 для API управления данными . HTTP/2 предлагает несколько преимуществ по сравнению с HTTP/1.1, которые по-прежнему поддерживаются для обратной совместимости. Одним из основных преимуществ HTTP/2 является повышение производительности, повышение надежности и снижение требований к системным ресурсам по протоколу HTTP/1.1. Теперь с этим изменением мы поддерживаем HTTP/2 как для портала индексатора видео, так и для API канала данных. Мы советуем обновить код, чтобы воспользоваться преимуществами этого изменения.

Улучшения аналитических сведений по темам

Теперь мы поддерживаем все пять уровней онтологии IPTC.

Апрель 2023 г.

поддержка здоровья ресурса

Индексатор видео Azure теперь интегрирован с Azure Resource Health, что позволяет увидеть работоспособность и доступность каждого из ресурсов Индексатора видео Azure. Azure Работоспособность ресурсов также помогает диагностировать и решать проблемы, и вы можете настроить оповещения, чтобы получать уведомления при возникновении проблем с ресурсами. Дополнительные сведения см. в обзоре Работоспособность ресурсов Azure.

Модель распознавания символов анимации прекращена

Модель распознавания символов анимации прекращена 1 марта 2023 года. Для любых связанных проблем откройте запрос в службу поддержки через портал Azure.

Исключение конфиденциальных моделей ИИ

Следуя принципам Microsoft Responsible AI, индексатор видео Azure теперь позволяет исключать определенные модели ИИ при индексировании мультимедийных файлов. Список чувствительных моделей ИИ включает: обнаружение лиц, наблюдение за людьми, эмоции, распознавание меток.

Эта функция в настоящее время доступна через API и во всех предустановках, кроме расширенной предустановки.

Улучшения обнаружения наблюдаемых пользователей

Дополнительные сведения см. в разделе "Рекомендации и ограничения" при выборе варианта использования.

Март 2023 г.

Поддержка хранилища за брандмауэром

Рекомендуется заблокировать учетные записи хранения и отключить общедоступный доступ для улучшения или соответствия корпоративной политике безопасности. Индексатор видео теперь может получить доступ к учетным записям хранения, недоступным для публики, используя исключение службы Azure Trusted Service и управляемые удостоверения. Дополнительные сведения о настройке см. в нашем руководстве.

Новое персонализированное обучение речи и произношению

Индексатор видео Azure AI добавил новую возможность работы с пользовательскими моделями распознавания речи. Этот интерфейс включает возможность использовать пользовательские наборы данных произношения для улучшения распознавания неправильных слов, фраз или имен. Пользовательские модели можно использовать для улучшения качества транскрибирования содержимого с отраслевой терминологией. Дополнительные сведения см. в разделе "Настройка модели речи".

Наблюдаемые улучшения качества работы людей

Теперь функция "Наблюдаемые люди" поддерживает людей, которые сидят. Это в дополнение к существующей поддержке людей, которые стоят или ходят. Это улучшение сделает модель наблюдаемых людей более универсальной и подходящей для более широкого спектра сценариев использования. Мы также улучшили алгоритмы повторной идентификации и группировки модели на 50 %. Модель теперь может более точно отслеживать и группировать людей в нескольких представлениях камеры.

Оптимизация длительности индексирования наблюдаемых пользователей

Мы оптимизировали использование памяти модели наблюдаемых людей, что привело к сокращению продолжительности индексирования на 60 % при использовании пресета расширенного анализа видео. Теперь вы можете эффективнее обрабатывать видеоматериалы и получать результаты быстрее.

2023 февраля

Цены

1 января 2023 года мы представили код SKU Advanced Audio and Video для расширенных пресетов. Это было сделано для того, чтобы сообщить об использовании каждой предустановки: "Базовый", "Стандартный" и "Дополнительно" с собственными отдельными счетчиками в отчете о выставлении счетов Azure. Это также можно увидеть в отчетах по анализу затрат Azure.

Начиная с 1 февраля, мы рады объявить о снижении цен на 40% на номера SKU "Базовый аудиоанализ", "Анализ аудио" и "Анализ видео". Мы приняли во внимание отзывы от наших клиентов и тенденций рынка, чтобы внести изменения, которые помогут им воспользоваться. Сокращая цены и внедряя новый расширенный номер SKU, мы предоставляем конкурентные цены и дополнительные возможности для клиентов, чтобы сбалансировать затраты и функции. Кроме того, по мере того как мы продолжаем улучшать и добавлять дополнительные возможности искусственного интеллекта, клиенты смогут воспользоваться этими экономиями при выполнении новых операций или повторного индексирования.

Это изменение будет реализовано автоматически, и клиенты, у которых уже есть скидки Azure, будут продолжать получать их в дополнение к новым ценам.

Заряд	Базовый анализ звука	Стандартный анализ звука	Расширенный анализ звука	Стандартный анализ видео	Расширенный анализ видео
За каждую минуту ввода	$0,0126	$0,024	$0,04	$0,09	$0,15

Тег сетевой службы

Индексатор видео поддерживает использование тега безопасности сети, чтобы разрешить сетевой трафик из IP-адресов индексатора видео в сеть. Начиная с 22 января мы переименовали тег службы безопасности сети в AzureVideoAnalyzerForMediaVideoIndexer. Это изменение потребует обновления скриптов развертывания и (или) существующей конфигурации. Дополнительные сведения см. в нашей документации по безопасности сети.

Январь 2023

Опыт работы с уведомлениями

На веб-сайте Индексатора видео Azure теперь есть панель уведомлений, в которой можно оставаться в курсе важных обновлений продукта, таких как события, влияющие на обслуживание, новые выпуски и многое другое.

Обнаружение текстового логотипа

Обнаружение текстового логотипа позволяет настраивать текстовые логотипы для обнаружения в видео. Дополнительные сведения см. в разделе "Обнаружение текстового логотипа".

Переключение каталогов

Теперь вы можете переключать каталоги Entra ID и управлять учетными записями Azure AI Video Indexer через арендаторов с помощью веб-сайта Azure AI Video Indexer.

Поддержка языков

• Теперь поддерживаются новые языки: ирландский, болгарский, каталонский, греческий, эстонский, хорватский, латышский, румынский, словацкий, словенский, телугу, малаялам, каннада, исландский, армянский, гуджарати, малайский и тамильский.
• Используйте API для получения всех поддерживаемых языков: получение поддерживаемых языков.

Для получения дополнительной информации см. раздел Поддерживаемые языки.

Группирование лиц

Значительно сократилось число случаев обнаружения лиц низкого качества в пользовательском интерфейсе и insights.json. Повышение качества и удобства использования с помощью улучшенного алгоритма группировки.

Ноябрь 2022 г.

Теперь имена докладчиков можно изменить с веб-сайта Индексатора видео Azure AI

Теперь вы можете добавлять новых спикеров, переименовывать уже идентифицированных и изменять назначение спикеров для определенной строки расшифровки с помощью веб-сайта Индексатора видео Azure. Дополнительные сведения о том, как изменить спикеров на панели временной шкалы, см. в разделе на веб-сайте Azure AI Video Indexer "Изменение спикеров".

Те же возможности доступны в API Azure AI Video Indexer для загрузки видео индекса.

Октябрь 2022

Новая встроенная роль: средство просмотра с ограниченным доступом индексатора видео

Роль Ограниченного просмотра Видео Индексатора с ограниченным доступом предназначена для пользователей веб-сайта Azure AI Video Indexer. Разрешенные действия роли связаны с работой на веб-сайте Индексатора видео Azure AI.

Дополнительные сведения см. в разделе Управление доступом с ролью ограниченного доступа для индексатора видео.

Аналитика обнаружения Slate (режим предварительного просмотра)

При индексировании видео с помощью расширенной опции индексирования автоматически определяются следующие данные об обнаружении титра (процесса постпродакшн фильма):

• Обнаружение clapperboard с извлечением метаданных.
• Обнаружение цифровых шаблонов, включая цветовые полосы.
• Обнаружение безтекстового листа, включая сопоставление сцен.

Для получения подробной информации см. Обнаружение Slate.

Поддержка новых исходных языков для STT, перевода и поиска

Теперь поддерживаются исходные языки для STT (речь в тексте), перевода и поиска в Украине и Вьетнаме. Это означает, что функции транскрибирования, перевода и поиска также поддерживаются для этих языков на веб-сайте Индексатора видео Azure AI, мини-приложениях и API.

Для получения дополнительной информации см. поддерживаемые языки.

Изменение имени говорящего в транскрибировании через API

Теперь вы можете изменить имя докладчиков в транскрибировании с помощью API индексатора видео Azure.

Аннотация времени на уровне слова с оценкой достоверности.

Теперь поддерживается временная аннотация на уровне слова с указанием уровня достоверности.

Заметка — это любой тип дополнительных сведений, добавляемых в уже существующий текст, будь то транскрибирование звукового файла или исходного текстового файла.

Дополнительные сведения см. в разделе "Изучение сведений о транскрибировании на уровне слова".

Интеграция Azure Monitor с возможностью индексировать журналы

Новый набор журналов, описанный ниже, позволяет лучше отслеживать конвейер индексирования.

Индексатор видео Azure теперь поддерживает параметры диагностики для событий индексирования. Теперь вы можете экспортировать логи мониторинга загрузки и переиндексации файлов мультимедиа через параметры диагностики в Azure Log Analytics, Storage, Event Hubs или стороннее решение.

Расширенные поддерживаемые языки в LID и MLID с помощью API индексатора видео в Azure AI

Расширена поддержка языков в функциях LID (идентификации языка) и MLID (многоязычной идентификации) с использованием API индексатора видео Azure AI.

Следующие языки теперь поддерживаются через API: арабский (Объединенные Арабские Эмираты), арабский современный стандартный, арабский (Египет), арабский (Ирак), арабский (Иордания), арабский (Кувейт), арабский (Оман), арабский (Катар), арабский (Саудовская Аравия), арабский (Сирийская Арабская Республика), чешский, датский, немецкий, английский (Австралия), английский (Великобритания), английский (США), испанский, испанский (Мексика), финский, французский (Канада), французский, иврит, хинди, итальянский, японский, корейский, норвежский, голландский, польский, португальский, португальский (Португалия), русский, шведский, тайский, турецкий, украинский, вьетнамский, китайский (упрощенный), китайский (кантонский, традиционный).

Чтобы указать список языков для идентификации LID или MLID при автоматическом обнаружении, вызовите API загрузки видео и задайте параметр customLanguages для включения до 10 языков из поддерживаемых выше языков. Обратите внимание, что языки, указанные в customLanguages, сравниваются на уровне языка, поэтому должны включать только одну локаль на язык.

Для получения дополнительной информации см. поддерживаемые языки.

Настройка уровня доверия в модели пользователя с помощью API

Используйте API модели Patch person для настройки уровня достоверности распознавания лиц в модели человека.

Просмотр спикеров в скрытых субтитрах

Теперь вы можете просматривать говорящих в скрытых субтитрах проигрывателя мультимедиа Индексатора видео Azure. Дополнительные сведения см. в разделе "Просмотр закрытых субтитров" на веб-сайте Индексатора видео Azure AI.

Управляйте ограничивающими прямоугольниками для лиц и людей с помощью параметров.

Новый boundingBoxes параметр URL-адреса контролирует возможность включения/выключения ограничивающих прямоугольников при встраивании проигрывателя. Дополнительные сведения см. в разделе "Внедрение мини-приложений".

Управление автоматическим воспроизведением из параметров учетной записи

Определите, будет ли файл мультимедиа автоматически воспроизводиться при открытии с помощью веб-приложения с помощью параметров пользователя. Перейдите на веб-сайт Индексатора видео Azure AI — > значок Шестеренки (верхний правый угол) ->Параметры пользователя ->Автоматически воспроизводить файлы мультимедиа.

Копирование идентификатора видео из представления проигрывателя

Скопировать идентификатор видео доступно при выборе видео на веб-сайте Индексатора видео Azure AI

Новая темная тема в родных цветах (Azure)

Выберите нужную тему на веб-сайте Индексатора видео в Azure AI. Выберите значок Шестеренки (верхний правый угол) —> параметры пользователя.

Поиск или фильтрация списка учетных записей

Вы можете искать или фильтровать список учетных записей с помощью имени или региона учетной записи. Выберите учетные записи пользователей в правом верхнем углу веб-сайта Индексатора видео Azure AI.

сентябрь 2022 года

Общая доступность учетных записей на основе ARM

С помощью учетных записей на основе Azure Resource Management (ARM) платной (неограниченной) подписки вы можете использовать:

• Управление доступом на основе ролей Azure (RBAC).
• Управляемое удостоверение для повышения безопасности взаимодействия между вашими Службами мультимедиа Azure и Azure AI Video Indexer, тегами сетевой службы и собственной интеграцией с Azure Monitor для мониторинга вашей учетной записи (журналы аудита и индексирования).
• Масштабируйте и автоматизируйте своё развертывание с помощью ARM-шаблона, bicep или terraform.
• Создайте соединитель логических приложений для учетных записей на основе ARM.

Сведения о создании учетной записи на основе ARM см. в статье "Создание учетной записи".

Август 2022 г.

Обновление модели тематического анализа

Модель распознавания тем в Azure AI Video Indexer была обновлена, и теперь мы извлекаем более 6,5 миллионов тем (например, охватывающих такие темы, как вирус COVID-19). Чтобы воспользоваться последними обновлениями моделей, необходимо переиндексировать видеофайлы.

Модель вывода тем теперь доступна в Azure Government.

Теперь вы можете использовать модель вывода тем в платной учетной записи Azure Video Indexer на платформе Azure Government в регионах Вирджиния и Аризона. В этом выпуске мы завершили достижение паритета ИИ между Azure глобальным и государственным. Чтобы воспользоваться обновлениями модели, необходимо переиндексировать видеофайлы.

Длина сеанса составляет 30 дней на веб-сайте Индексатора видео Azure AI

Продолжительность сеанса на веб-сайте Индексатора видео Azure AI была продлена до 30 дней. Вы можете сохранять сеанс без необходимости повторно входить в систему каждые 1 час.

Июль 2022

Аналитика по представленной одежде (предварительный обзор)

Аналитические сведения о выбранной одежде обеспечивают более целевое размещение рекламы.

В этой информации содержатся сведения о ключевых предметах, которые носят люди на видео, и временная метка, когда появляется одежда. Это позволяет размещать качественную контекстную рекламу в видео, где соответствующие объявления одежды связываются с определённым моментом просмотра внутри видео.

Чтобы просмотреть выбранную одежду наблюдаемого человека, сначала необходимо индексировать видео с помощью расширенных параметров Azure Video Indexer. Подробные сведения о том, как ранжируются изображения рекомендуемой одежды и как просмотреть этот анализ, см. в статье о рекомендуемой одежде.

Июнь 2022 г.

Улучшения панели индексатора видео в портале Azure

Индексатор видео Azure ai теперь поддерживает создание нового ресурса с помощью управляемого удостоверения, назначаемого системой, или управляемого удостоверения, назначаемого пользователем, для одного ресурса.

Вы также можете изменить основное управляемое удостоверение с помощью вкладки "Удостоверение" в портале Azure.

Ограниченный доступ к распознаванию знаменитостей и функциям идентификации лиц

В рамках приверженности Корпорации Майкрософт ответственному искусственному интеллекту мы разрабатываем и выпускаем Индексатор видео Azure ИИ — функции идентификации и распознавания знаменитостей. Эти функции предназначены для защиты прав отдельных лиц и общества и обеспечения прозрачного взаимодействия с компьютером человека. Таким образом, существует ограниченный доступ и использование функций Индексатора видео Azure AI: идентификации и распознавания знаменитостей.

Функции идентификации и распознавания знаменитостей требуют регистрации и доступны только управляемым клиентам и партнерам Майкрософт. Клиентам, которые хотят использовать эту функцию, необходимо подать заявку и отправить форму регистрации. Дополнительные сведения читайте в статье "Индексатор видео Azure AI с ограниченным доступом".

См. также следующее: объявление в блоге и инвестиции в технологии и средства защиты для распознавания лиц.

Май 2022 г.

Разрыв строк в расшифровках

Улучшена логика разрыва строки, чтобы лучше разделить расшифровку на предложения. Новые возможности редактирования теперь доступны на веб-сайте Индексатора видео Azure AI, например добавление новой строки и изменение метки времени строки. Дополнительные сведения см. в разделе "Вставка или удаление строк расшифровки".

Интеграция Azure Monitor

Индексатор видео Azure теперь поддерживает параметры диагностики для событий аудита. Журналы событий аудита теперь можно экспортировать с помощью параметров диагностики в Azure Log Analytics, Хранилище, Event Hubs или стороннее решение.

Дополнения обеспечивают более простой доступ к анализу данных, мониторингу работы ресурсов и автоматическому созданию потоков для реагирования на события. Дополнительные сведения см. в статье Monitor Azure AI Video Indexer.

Улучшения Аналитики видео

Средство чтения символов объектов (OCR) улучшается на 60 %. Обнаружение лиц улучшается на 20 %. Точность меток улучшается на 30 % для разнообразия видео. Эти улучшения доступны сразу во всех регионах и не требуют каких-либо изменений клиентом.

Сервисный тег

Индексатор видео Azure AI теперь является частью тегов сетевой службы. Индексатор видео часто требует доступа к другим ресурсам Azure (например, службе хранилища). Если вы защищаете входящий трафик к ресурсам с помощью группы безопасности сети, теперь можно выбрать Индексатор видео в составе встроенных тегов службы. Это упрощает управление безопасностью при заполнении тега службы общедоступными IP-адресами.

Переключатель распознавания знаменитостей

Теперь вы можете включить или отключить модель распознавания знаменитостей на уровне учетной записи (только в классической учетной записи). Чтобы включить или отключить модель, перейдите к переключателю настройки> модели или отключите ее. После отключения модели информация от Индексатора видео не будет включать выходные данные модели для знаменитостей и не будет запускать поток обработки модели для знаменитостей.

Имя репозитория индексатора видео в Azure AI

По состоянию на 1 мая был переименован обновленный репозиторий мини-приложения Azure AI Video Indexer. Вместо этого используйте https://www.npmjs.com/package/@azure/video-indexer-widgets.

Апрель 2022 г.

Переименован видеоанализатор Azure для мультимедиа обратно в индексатор видео Azure AI

По состоянию на сегодняшний день, имя продукта Видеоанализатор Azure для медиа — Azure AI Video Indexer и все ресурсы, связанные с продуктом (веб-портал, маркетинговые материалы). Это обратно совместимое изменение, которое не влияет на API и ссылки. Новый логотип Индексатора видео Azure AI:

Март 2022 г.

Файлы скрытых субтитров теперь поддерживают указание атрибутов говорящего

Индексатор видео Azure AI позволяет включать характеристики говорящих на основе файла субтитров для слабослышащих, который вы выбираете скачать. Чтобы включить атрибуты говорящего, выберите "Загрузки" —> затем выберите "Скрытые субтитры" —> выберите формат скачиваемого файла скрытых субтитров (SRT, VTT, TTML, TXT или CSV) и установите флажок Включить говорящего.

Улучшения в ассортименте виджетов

Были реализованы следующие улучшения:

• Виджеты Индексатора видео Azure ИИ поддерживают несколько языков в параметре виджета.
• Мини-приложения Аналитики теперь поддерживают начальные параметры поиска и множественные параметры сортировки.
• Мини-приложения Аналитики также включают шаг подтверждения перед удалением лица, чтобы избежать ошибок.
• Теперь при настройке мини-приложения можно указать ширину в виде строки (например, "100%", "100vw").

2022 февраля

Общедоступная предварительная версия управления учетными записями Индексатора видео Azure на основе ARM в облаке для государственных организаций

Веб-сайт Индексатора видео Azure теперь поддерживает управление учетными записями на основе ARM в общедоступной предварительной версии (см. примечание о выпуске за ноябрь 2021 г.).

Использование открытого исходного кода для создания учетной записи на основе ARM

Добавлены новые примеры кода, включая вызовы HTTP для использования индексатора видео Azure AI с созданием, чтением, обновлением и удалением (CRUD) API ARM для разработчиков приложений.

Январь 2022 года

Улучшенное обнаружение звуковых эффектов

Возможность обнаружения звуковых эффектов улучшена с целью повысить коэффициент обнаружения в следующих классах:

• реакция толпы (одобрение, аплодисменты и свист);
• выстрел или взрыв;
• Смех

Дополнительные сведения см. в статье Обнаружение звуковых эффектов.

Поддержка новых исходных языков для STT, перевода и поиска на веб-сайте

Индексатор видео Azure AI вводит поддержку исходных языков для STT (речь в текст), перевода и поиска на иврите (he-IL), португальском (pt-PT) и персидском (fa-IR) на веб-сайте Azure AI Video Indexer. Это означает, что функции транскрибирования, перевода и поиска также поддерживаются для этих языков на веб-сайте и мини-приложениях Индексатора видео Azure.

Декабрь 2021 г.

Функция проектов теперь общедоступна

Возможность создания проектов теперь является общедоступной и готова к использованию в производственных целях. Нет влияния на цены, связанные с переходом "Предварительная версия в общедоступную версию". См. статью Добавление видеоклипов в проекты.

Поддержка новых исходных языков для STT, перевода и поиска на уровне API

Индексатор видео Azure AI предоставляет поддержку исходных языков stT (речь в текст), перевод и поиск на иврите (he-IL), португальском (pt-PT) и персидском (fa-IR) на уровне API.

Возможность обнаружения соответствующих лиц

При индексировании видео с помощью расширенных параметров индексатора видео в Azure AI можно просмотреть новую возможность обнаружения соответствующего пользователя. Если в вашем медиафайле обнаружены люди, теперь вы можете через медиаплеер просмотреть конкретных людей, соответствующих каждому из них.

Ноябрь 2021 г.

Публичная предварительная версия управления учетными записями Индексатора видео Azure на базе ARM

Индексатор видео Azure AI представляет общедоступную предварительную версию управления учетными записями на основе Azure Resource Manager (ARM). С помощью API индексатора видео на основе ARM можно создавать, изменять и удалять учетную запись из портал Azure.

Примечание.

Облако для государственных организаций включает поддержку учетных записей на основе CRUD ARM из API индексатора видео Azure и из портал Azure.

В настоящее время на веб-сайте отсутствует поддержка Azure AI Video Indexer.

Для получения дополнительной информации перейдите к созданию учетной записи в Azure AI Video Indexer.

Обнаружение одежды людей

При индексировании видео с помощью расширенных параметров индексатора видео Azure AI вы можете просмотреть новые возможности обнаружения одежды людей. Если в файле мультимедиа обнаружены люди, теперь можно просмотреть тип одежды, который они носят через проигрыватель мультимедиа.

Прямоугольник вокруг лица (предварительный просмотр)

Теперь при индексировании файла мультимедиа можно включить для обнаруженных лиц ограничивающий прямоугольник. Возможность включения ограничивающего прямоугольника для лица доступна при индексировании файла путем выбора стандартных, базовых или расширенных предустановок индексирования.

Ограничивающие прямоугольники можно включить в проигрывателе.

октябрь 2021 года

Внедрение мини-приложений в приложение с помощью пакета индексатора видео в Azure AI

Используйте новый пакет npm индексатора видео Azure AI (AVAM) @azure/video-analyzer-for-media-widgets, чтобы добавить insights виджеты в ваше приложение и настроить их в соответствии с вашими потребностями.

Новый пакет AVAM позволяет легко встроить и обмениваться данными между нашими виджетами и вашим приложением, вместо добавления элемента iframe для внедрения виджета аналитики. Дополнительные сведения см. в разделе "Внедрение и настройка мини-приложений Индексатора видео Azure ИИ" в приложении. 

Август 2021 г.

Повторное индексирование видео- или аудиофайлов

Теперь можно переиндексировать видео или звуковые файлы, которые не были успешно проиндексированы во время процесса индексирования.

Улучшение поддержки доступности

Исправлены ошибки, связанные с CSS, оформлением и доступностью.

• высокая контрастность
• параметры учетной записи и представления аналитических сведений на портале.

Июль 2021

Автомасштабирование зарезервированных единиц мультимедиа

Начиная с 1 августа 2021 года индексатор видео Azure AI включил автоматическое масштабирование зарезервированных единиц мультимедиа (MRUS) с помощью Службы мультимедиа Azure, поэтому вам не нужно управлять ими с помощью индексатора видео Azure AI. Это позволит оптимизировать цены, например снижение цен во многих случаях в зависимости от потребностей вашего бизнеса, так как оно масштабируется автоматически.

Июнь 2021 года

Индексатор видео Azure AI, развернутый в шести новых регионах

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в Центрально-Франции, Центральной части США, Южной Бразилии, Западной части США, Центральной Кореи и Западной Японии.

Май 2021

Поддержка новых исходных языков для преобразования речи в текст (STT), перевода и поиска

Индексатор видео Azure AI теперь поддерживает STT, перевод и поиск на китайском (кантонском) ('zh-HK'), голландском (Нидерланды) ('nl-NL'), чешском ('cs-CZ'), польском ('pl-PL'), шведском (Швеция) ('sv-SE'), норвежском ('nb-NO'), финском ('fi-FI'), канадском французском ('fr-CA'), тайском ('th-TH'), арабском: (Объединенные Арабские Эмираты) ('ar-AE', 'ar-EG'), (Ирак) ('ar-IQ'), (Иордания) ('ar-JO'), (Кувейт) ('ar-KW'), (Ливан) ('ar-LB'), (Оман) ('ar-OM'), (Катар) ('ar-QA'), (Палестинская автономия) ('ar-PS'), (Сирия) ('ar-SY'), и турецком ('tr-TR').

Эти языки доступны как на веб-сайте API, так и на веб-сайте индексатора видео Azure AI. Выберите нужный язык в поле со списком Исходный язык видео.

Новая тема индексатора видео Azure AI

Доступна новая тема "Azure" в дополнение к темам "light" (светлая) и "dark" (темная). Чтобы выбрать тему, щелкните значок шестеренки в правом верхнем углу веб-сайта, найдите темы в разделе "Параметры пользователя".

Новый открытый исходный код, который можно использовать

В наш репозиторий GitHub добавлены три новых проекта GitHub:

• код для использования недавно добавленных настроек мини-приложения;

• решение, которое поможет вам добавить дедупликацию в видеотеки.

Новый параметр для включения и выключения ограничивающих прямоугольников (для наблюдаемых людей) на проигрывателе

При индексировании видео с использованием расширенных параметров видео вы можете увидеть наши новые возможности по распознаванию людей. Если в вашем мультимедийном файле обнаружены люди, вы можете включить ограничивающие рамки для найденного человека через проигрыватель.

Апрель 2021 г.

Служба индексатора видео переименована в Индексатор видео Azure AI.

Улучшенный интерфейс отправки на портале

Индексатор видео Azure AI имеет новый интерфейс отправки на веб-сайте. Чтобы загрузить медиафайл, нажмите кнопку Загрузить на вкладке Медиафайлы.

В gov-cloud доступен новый портал разработчика

Портал разработчика API Индексатора видео Azure теперь также доступен в Azure для правительства США.

Обнаружение наблюдаемых пользователей (предварительная версия)

Индексатор Видео Azure AI теперь обнаруживает людей в видео и предоставляет информацию, такую как расположение человека в видеокадре и точные метки времени (начало, конец) появления человека. API возвращает координаты ограничивающего прямоугольника (в пикселях) для каждого обнаруженного человека, также сообщая достоверность обнаружения.

Например, если кадры видео содержат человека, операция обнаружения выведет список его появлений вместе с координатами в кадрах видео. Эту функцию можно использовать для определения пути перемещения человека в видео. Также она позволяет определить, присутствует ли в видеоролике один и тот же человек несколько раз.

Добавленная функция обнаружения наблюдаемых людей доступна при индексировании вашего файла, выбрав параметр Advanced ->Advanced video или Advanced video + audio пресет (в разделе индексирования Видео + аудио). Стандартные и базовые предустановки индексирования не включают эту новую расширенную модель.

При выборе просмотра инсайтов о видео на веб-сайте Индексатора видео Azure AI функция обнаружения людей будет отображаться на странице со всеми миниатюрами обнаруженных людей. Можно выбрать эскиз человека и увидеть, где он отображается в видеопроигрывателе.

Эта функция также доступна в JSON-файле, созданном индексатором видео Azure AI. Дополнительные сведения см. в разделе "Наблюдаемые люди" в видео.

Обнаруженные звуковые события с использованием функции Обнаружение аудиоэффектов (предварительная версия)

Теперь обнаруженные звуковые события можно просматривать в файле со скрытыми субтитрами. Файл можно скачать с веб-сайта Индексатора видео Azure ИИ и доступен в качестве артефакта в API GetArtifact.

Компонент Обнаружение звуковых эффектов (предварительная версия) обнаруживает различные звуковые события и классифицирует их по разным акустическим категориям (например: выстрел, крик, реакция толпы и др.). Дополнительные сведения см. в статье Обнаружение звуковых эффектов.

Март 2021 г.

Анализ звука

Анализ звука доступен в новом дополнительном пакете функций звука по другой цене. Новая предустановка Базовое аудио представляет собой недорогой вариант исключительно для извлечения транскрипции речи, перевода и вывода подписей и субтитров. В предустановке Базовое аудио будет создано два отдельных пункта в счете: один для транскрипции, второй — для форматирования подписей и субтитров. Подробнее можно узнать на странице Цены на Службы мультимедиа.

Чтобы добавить пакет, во время повторного или первичного индексирования файла выберите Дополнительные параметры ->Базовое аудио (под выпадающим меню Индексация видео и аудио).

Новый портал разработчика

Индексатор видео Azure AI имеет новый портал разработчика. Ознакомьтесь с новыми API Индексатора видео Azure ИИ и найдите все соответствующие ресурсы в одном месте: репозиторий GitHub, Stack overflow, техническое сообщество Индексатора видео Azure с соответствующими записями блога, часто задаваемыми вопросами об индексаторе видео Azure AI, User Voice, чтобы предоставить свои отзывы и предложить функции, а также ссылку CodePen с примерами кода мини-приложений.

Дополнительные возможности настройки аналитического мини-приложения

Теперь пакет SDK доступен для внедрения мини-приложения аналитики Индексатора видео Azure в собственную службу и настройки его стиля и данных. Пакет SDK поддерживает стандартный виджет анализа Azure AI Video Indexer и полностью настраиваемый виджет анализа. Пример кода доступен в репозитории GitHub индексатора видео Azure AI. Благодаря этим расширенным возможностям настройки разработчик решения может применять пользовательские стили и интегрировать собственные данные ИИ клиента и представить их в виджете аналитики (с аналитикой Azure AI Video Indexer или без нее).

Индексатор видео Azure AI, развернутый в центрально-северной части США, западной части США и Центральной Канаде

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в центрально-западной части США, западной части США и Центральной Канаде.

Поддержка новых языков исходного кода для преобразования речи в текст (STT), перевода и поиска

Индексатор видео Azure AI теперь поддерживает STT, перевод и поиск в датском языке ('da-DK'), норвежский ('nb-NO'), шведский('sv-SE'), финский('fi-FI'), канадский французский ('fr-CA'), тайский('th-TH'), арабский ('ar-BH', "ar-EG", "ar-IQ", "ar-JO", "ar-KW", "ar-LB", "ar-OM", "ar-QA", "ar-S" и "ar-SY", а также турецкий('tr-TR'). Эти языки доступны как на веб-сайте API, так и на веб-сайте Индексатора видео Azure AI.

Поиск по теме на веб-сайте Индексатора видео Azure AI

Теперь вы можете использовать функцию поиска в верхней части страницы веб-сайта Индексатора видео в Azure AI для поиска видео с определенными разделами.

2021 февраля

Несколько владельцев учетных записей

Роль владельца учетной записи была добавлена в Индексатор видео Azure AI. Вы можете добавлять, изменять и удалять пользователей, а также менять их роль. Дополнительные сведения о том, как предоставлять общий доступ к учетной записи, см. в разделе о приглашении пользователей.

Обнаружение звуковых событий (общедоступная предварительная версия)

Примечание.

Функция доступна только для пробных учетных записей.

Индексатор видео Azure AI теперь обнаруживает следующие звуковые эффекты в неречевых сегментах содержимого: выстрелы, звуки разбитого стекла, тревога, сирена, взрыв, лай собаки, крики, смех, реакции толпы (аплодисменты, овации и освистывания) и тишина.

При индексации файла выберите Дополнительные параметры ->Расширенный аудио пресет (в разделе Индексация видео и аудио), чтобы воспользоваться новой функцией эффектов звука. При стандартной индексации обнаруживается только тишина и реакция толпы.

Теперь тип события аплодисменты, включенный в предыдущую модель звуковых эффектов, стал частью типа события реакция толпы.

При выборе просмотра аналитических сведений о вашем видео на веб-сайте Индексатора видео Azure AI на странице отображаются звуковые эффекты.

Расширение возможностей именованных сущностей

Список людей и мест в целом был расширен и обновлен.

Кроме того, модель теперь включает людей и локации в контексте, которые не являются знаменитыми, как "Сэм" или "Дом" в видео.

январь 2021

Индексатор видео Azure ai развернут в облаке для государственных организаций США

Теперь вы можете создать платную учетную запись Индексатора видео Azure на облачной платформе правительства США в регионах Вирджинии и Аризоны. Пробная версия Индексатора видео Azure AI недоступна в указанном регионе. Дополнительные сведения см. в документации по индексатору видео в Azure AI.

Индексатор видео Azure AI, развернутый в центральном регионе Индии

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в центральном регионе Индии.

Новый темный режим для веб-сайта Индексатора видео Azure AI

Веб-сайт Azure AI Video Indexer теперь доступен в темном режиме. Для этого откройте панель настроек и включите параметр Темный режим.

Декабрь 2020 г.

Индексатор видео Azure AI, развернутый в Западной Швейцарии и Северной Швейцарии

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в регионах "Западная Швейцария" и "Северная Швейцария".

Октябрь 2020 года

Запланированные изменения проверки подлинности веб-сайта Индексатора видео Azure AI

Начиная с 1 марта 2021 г., вы больше не сможете зарегистрироваться и войти на портал разработчика веб-сайтаИндексатора видео Azure с помощью Facebook или LinkedIn.

Вы сможете зарегистрироваться и войти в систему с помощью одного из следующих поставщиков: Entra ID, Microsoft и Google.

Примечание.

Учетные записи Индексатора видео Azure AI, подключенные к LinkedIn и Facebook, не будут доступны после 1 марта 2021 года.

Вы должны пригласить пользователя с собственной учетной записью с Entra ID, Microsoft или Google на учетную запись Индексатора видео Azure, чтобы сохранять к ней доступ. Вы можете добавить дополнительного владельца поддерживаемых провайдеров, как указано в приглашении.
Или же создайте платную учетную запись и перенесите данные.

Август 2020 г.

Мобильный дизайн веб-сайта Индексатора видео Azure AI

Веб-сайт Индексатора видео Azure теперь поддерживает мобильные устройства. Пользовательский опыт адаптируется под размер экрана вашего мобильного устройства (за исключением интерфейсов настройки).

Внедрение специальных возможностей и исправление ошибок

В рамках Руководств по доступности веб-контента (WCAG) опыт использования веб-сайта Индексатора видео Azure соответствует уровню С в рамках стандартов доступности Майкрософт. Устранены некоторые ошибки и внесены улучшения, связанные с навигацией с помощью клавиатуры, программным доступом и средствами чтения с экрана.

Июль 2020

Общая доступность для многоязычной идентификации

Функция идентификации на нескольких языках была переведена от предварительного просмотра к общедоступной версии и готова для продуктивного использования.

Нет влияния на цены, связанные с переходом "Предварительная версия в общедоступную версию".

Улучшения веб-сайта Индексатора видео в Azure AI

Корректировки в коллекции видео

Добавлена новая строка для расширенного поиска аналитических сведений с дополнительными фильтрами. Также улучшены результаты поиска.

Список получил новое представление. Теперь вы можете сортировать архивы видео с несколькими файлами и управлять ими.

Новая панель для удобного выбора и настройки

Мы добавили боковую панель для простого выбора и настройки пользователя, позволяя просто и быстро создавать учетные записи и предоставлять общий доступ, а также настраивать параметры.

Боковая панель также используется для пользовательских настроек и справки.

Июнь 2020 г.

Поиск по темам

Теперь вы можете использовать поиск API, чтобы находить видео на специальные темы (только для API).

Темы добавляются как часть необязательного параметра textScope. Дополнительные сведения см. в разделе API.

Обновление меток

Инструмент маркировки обновлён и теперь включает больше визуальных меток, которые можно идентифицировать.

Май 2020 г.

Индексатор видео Azure AI, развернутый в восточной части США

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в регионе "Восточная часть США".

URL-адрес индексатора видео Azure AI

Региональные конечные точки Azure AI Video Indexer были унифицированы и теперь все начинаются на www. Никаких действий не требуется.

Теперь вы можете получить доступ к www.videoindexer.ai, будь то для внедрения виджетов или входа на веб-сайт Azure AI Video Indexer.

Также wus.videoindexer.ai будет перенаправляться на www. Дополнительные сведения см. в статье Встраивание виджетов Индексатора видео Azure AI в ваши приложения.

Апрель 2020 г.

Новые возможности параметров мини-приложения

Мини-приложение Аналитические сведения содержит новые параметры: language и control.

У мини-приложения Проигрыватель есть новый параметр locale. Параметры locale и language управляют языком проигрывателя.

См. дополнительные сведения в разделе типы мини-приложений.

Новая обложка проигрывателя

Новый скин игрока выпущен с обновленным дизайном.

Подготовка к предстоящим изменениям

• Сейчас следующие API возвращают объект учетной записи:

  • Создать платный аккаунт
  • Get-Account
  • Получение авторизации учетных записей
  • Получить-Аккаунты-С-Токеном

  Объект Account имеет Url поле, указывающее на расположение веб-сайта Индексатора видео Azure AI. Для платных учетных записей поле Url сейчас указывает на внутренний URL-адрес, а не на общедоступный веб-сайт. В ближайшие недели мы изменим это и вернем URL-адрес веб-сайта Azure AI Video Indexer для всех учетных записей (включая пробные и платные).

  Не используйте внутренние URL-адреса, следует использовать общедоступные API Индексатора видео Azure AI.

• Если вы встраиваете URL-адреса индексатора видео Azure ИИ в ваши приложения, и эти URL-адреса не указывают на веб-сайт индексатора видео Azure или на конечную точку API индексатора видео Azure (https://api.videoindexer.ai), а вместо этого ведут на региональную конечную точку, например, https://wus2.videoindexer.ai, повторно создайте URL-адреса.

  Это можно сделать одним из следующих способов:

  • Замена URL-адреса на URL-адрес, указывающий на API виджета индексатора видео Azure (например, виджет аналитики)

  • Использование веб-сайта Azure AI Video Indexer для создания нового встроенного URL-адреса:

    Нажмите клавишу Play, чтобы перейти на страницу видео—> нажмите< кнопку />Внедрить,> скопируйте URL-адрес в приложение:

  Региональные URL-адреса не поддерживаются и будут заблокированы в ближайшие недели.

Январь 2020 г.

Пользовательская поддержка дополнительных языков

Индексатор видео Azure теперь поддерживает пользовательские языковые модели для ar-SY, en-UK и en-AU (только для API).

Обновление временного интервала действия удаления учетной записи

Действие по удалению учетной записи теперь выполняется в течение 90 дней, а не 48 часов.

Новый репозиторий на GitHub для Индексатора видео Azure AI

Теперь доступен новый индексатор видео Azure AI с GitHub с различными проектами, руководства по началу работы и примеры кода: https://github.com/Azure-Samples/media-services-video-indexer

Обновление Swagger

Azure AI Video Indexer объединил аутентификации и операции в единую спецификацию OpenAPI для Azure AI Video Indexer (swagger). Разработчики могут найти API на портале разработчика Azure AI Video Indexer.

Декабрь 2019 г.

Обновление расшифровки с новым API

Обновляйте определенные разделы расшифровки с помощью API Update-Video-Index.

Исправление конфигурации учетной записи с веб-сайта Индексатора видео Azure AI

Теперь вы можете обновлять конфигурацию подключения Медиасервисов, чтобы самостоятельно решать такие проблемы, как:

• некорректный ресурс Службы мультимедиа Azure;
• изменения паролей;
• Ресурсы служб мультимедиа были перемещены между подписками.

Чтобы исправить конфигурацию учетной записи, на веб-сайте Индексатора видео Azure перейдите на вкладку "Параметры > учетной записи" (как владелец).

Настройка учетной записи Custom Vision

Настройте учетную запись пользовательского визуального распознавания для платных учетных записей с помощью веб-сайта Индексатора видео Azure (ранее это было поддерживается только API). Для этого войдите на веб-сайт Индексатора видео Azure ИИ, выберите ><"Настройка модели" для настройки модели.>>

Сцены, снимки и опорные кадры теперь находятся в одной панели с аналитическими сведениями.

Сцены, снимки и опорные кадры теперь объединены в единую панель с аналитическими сведениями, чтобы их было проще использовать и выбирать. При выборе нужной сцены вы можете увидеть, из каких кадров и ключевых кадров она состоит.

Уведомление о длинном названии видео

Если имя видео больше 80 символов, индексатор видео Azure AI отображает описательную ошибку при отправке.

Уведомление об отключении конечной точки потоковой передачи

Если конечная точка потоковой передачи отключена, индексатор видео Azure AI отобразит описательную ошибку на странице проигрывателя.

Улучшенная обработка ошибок

Код состояния 409 теперь будет возвращаться от API Re-Index Video и Update Video Index в случае, если видео активно индексируется, чтобы предотвратить случайное переопределение текущих изменений повторной индексации.

Ноябрь 2019 г.

• Поддержка пользовательских языковых моделей корейского языка

  Индексатор видео Azure теперь поддерживает пользовательские языковые модели в корейском () (ko-KRкак в API, так и на портале).

• Поддержка новых языков для преобразования речи в текст (STT)

  API индексатора видео Azure теперь поддерживают STT в арабском Левантине (ar-SY), английском языке Великобритании (en-GB) и английском австралийском региональном языке (en-AU).

  Для отправки видео мы заменили zh-HANS на zh-CN. Поддерживаются оба варианта, но рекомендуется использовать более точное значение zh-CN.

2019 октября

• Поиск анимированных персонажей в коллекции

  Теперь при индексировании анимированных персонажей можно искать их в коллекции видео учетной записи.

Сентябрь 2019

Несколько улучшений, объявленных на IBC 2019:

• Распознавание анимированных персонажей (общедоступная предварительная версия)

  Возможность обнаруживать группы и распознавать персонажей в анимированном содержимом с помощью интеграции с пользовательской системой визуального распознавания.

• Идентификация на нескольких языках (общедоступная предварительная версия).

  Выявление сегментов на нескольких языках в звуковой дорожке и создание многоязычной транскрипции. Изначально поддерживается английский, испанский, немецкий и французский языки. Дополнительные сведения см. в разделе Транскрибирование многоязычного контента.

• Извлечение именованных сущностей для лиц и мест.

  Извлекает торговые марки, расположения и людей из речи и визуального текста с помощью обработки естественного языка (NLP).

• Классификация типов редакционных снимков.

  Тегирование кадров редакционных видов, включая крупный план, средний план, дубль, в помещении, на улице и т. д. Дополнительные сведения см. в разделе Определение типа редакционных кадров.

• Улучшение инференсирования тем - теперь на уровне 2

  Модель описания темы теперь поддерживает более глубокую степень детализации классификации IPTC. Ознакомьтесь с подробной информацией в статье Новая технология на основе ИИ в Службах мультимедиа Azure.

Обновления, август 2019 г.

Индексатор видео Azure AI, развернутый в Южной Великобритании

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в южной части Великобритании.

Новая информация о типах редакционных кадров

Для видеокадров добавлены новые теги, которые обозначают типы кадров согласно общепринятой редакционной терминологии, используемой в процессе создания контента. Примеры таких типов: экстремальный крупный план, крупный план, общий вид, средний план, двойной план, съемка на открытом воздухе, в помещении, лицо слева и лицо справа (доступно в JSON).

Доступно извлечение новых сущностей «Люди» и «Местоположения»

Индексатор видео Azure AI определяет названия мест и людей с помощью обработки естественного языка (NLP) на основе данных OCR и транскрипции видео. Индексатор видео Azure AI использует алгоритм машинного обучения для распознавания определенных мест (например, Эйфелевой башни) или людей (например, Джона Доу) в видео.

Извлечение опорных кадров в исходном разрешении

Ключевые кадры, извлеченные индексатором видео Azure AI, доступны в исходном разрешении видео.

Общедоступная версия для обучения пользовательских моделей лиц по изображениям

Функция обучения на лицах с изображений стала общедоступной (доступна через API и на портале).

Примечание.

Нет влияния на цены, связанные с переходом "Предварительная версия в общедоступную версию".

Опция переключения, скрывающая галерею

Пользователь может добавить вкладку "галерея" в список скрытых в портале (аналогично скрытию вкладки "образцы").

Увеличен максимальный размер URL-адреса

Введена поддержка строки запроса URL-адреса 4096 (вместо 2048) при индексировании видео.

Поддержка многоязычных проектов

Теперь можно создавать проекты на основе видео, которые были проиндексированы на разных языках (только API).

Июль 2019 г.

Редактор как мини-приложение

Редактор ИИ-индексатора видео Azure теперь доступен как мини-приложение для внедрения в клиентские приложения.

Обновление пользовательской языковой модели из файла скрытых субтитров на портале

Клиенты могут предоставлять файлы форматов ВТТ, SRT и TTML в качестве входных данных для языковых моделей на странице настроек портала.

2019 июня

Индексатор видео Azure AI, развернутый в Восточной Японии

Теперь вы можете создать платную учетную запись Индексатора видео Azure AI в восточном регионе Японии.

Создание и восстановление API учетных записей (предварительная версия)

Новое API позволяет обновлять конечную точку или ключ подключения к Службам мультимедиа Azure.

Улучшение обработки ошибок при отправке

Если учетная запись Служб мультимедиа Azure настроена неправильно, появится сообщение с описанием ошибки.

Предварительный просмотр ключевых кадров на временной шкале проигрывателя

Теперь вы можете просматривать кадры для каждого момента на временной шкале проигрывателя.

Частичное выделение в редакторе

Теперь вы можете просматривать предварительный просмотр всех аналитических сведений, выбранных в результате выбора определенного временного интервала в редакторе.

2019 мая

Обновить кастомную языковую модель из файла закрытых субтитров

Теперь API для создания и обновления пользовательской языковой модели поддерживают файлы форматов VTT, SRT и TTML в качестве входных данных для языковых моделей.

При вызове API обновления расшифровки видео расшифровка добавляется автоматически. Модель обучения, связанная с видео, также обновляется автоматически. Сведения о настройке и обучении языковых моделей см. в статье "Настройка языковой модели с помощью индексатора видео Azure AI".

Новые форматы расшифровки для скачивания: TXT и CSV

Помимо форматов закрытых субтитров (SRT, VTT и TTML), которые уже поддерживаются, индексатор видео Azure от AI теперь поддерживает скачивание расшифровки в форматах TXT и CSV.