Este artigo responde a perguntas frequentes sobre o Azure AI Video Indexer.
Perguntas gerais
O que é o Azure AI Video Indexer?
O Azure AI Video Indexer é uma aplicação na nuvem, parte dos serviços de IA do Azure, que lhe permite extrair as informações dos seus vídeos utilizando modelos de vídeo e áudio do Azure AI Video Indexer. Para obter mais informações, veja Descrição geral.
O que posso fazer com o Azure AI Video Indexer?
Algumas das operações que o Azure AI Video Indexer pode executar em arquivos de mídia incluem:
- Identificação e extração de discursos e identificação de oradores.
- Identificação e extração de texto no ecrã num vídeo.
- Deteção de objetos em um arquivo de vídeo.
- Identifique marcas (por exemplo: Microsoft) a partir de faixas de áudio e texto na tela em um vídeo.
- Detetar e reconhecer rostos a partir de um banco de dados de celebridades e um banco de dados de rostos definido pelo usuário.
- Extração de tópicos discutidos, mas não necessariamente mencionados em conteúdo de áudio e vídeo.
- Criação de legendas ocultas ou legendas a partir da faixa de áudio.
Para obter mais informações e mais recursos do Azure AI Video Indexer, consulte Visão geral.
Como faço para começar a usar o Azure AI Video Indexer?
O Azure AI Video Indexer inclui uma oferta de avaliação que fornece 2.400 minutos de indexação gratuitos ao usar o site do Azure AI Video Indexer ou a API do Azure AI Video Indexer (consulte o portal do desenvolvedor).
Para indexar vídeos e voos de áudio em escala, você pode conectar o Azure AI Video Indexer a uma assinatura paga do Microsoft Azure. Você pode encontrar mais informações sobre preços na página de preços .
Você pode encontrar mais informações sobre como começar em Introdução.
Preciso de habilidades de codificação para usar o Azure AI Video Indexer?
Você pode usar a interface baseada na Web do Azure AI Video Indexer para avaliar, configurar e gerenciar sua conta sem precisar de codificação. Quando estiver pronto para desenvolver aplicativos mais complexos, você poderá usar a API do Azure AI Video Indexer para integrar o Azure AI Video Indexer em seus próprios aplicativos, sites ou fluxos de trabalho personalizados usando tecnologias sem servidor, como Aplicativos Lógicos do Azure ou Azure Functions.
Quais são os recursos de Acesso Limitado do Azure AI Video Indexer e como se registrar?
Os recursos de Identificação Facial e Reconhecimento de Celebridades do Azure AI Video Indexer são recursos de Acesso Limitado que exigem registro.
Encontre o formulário de inscrição e mais informações sobre Acesso Limitado neste artigo.
Além disso, veja o seguinte: a postagem do blog de anúncio e a postagem do blog de investimento e salvaguarda para reconhecimento facial.
Preciso de habilidades de aprendizado de máquina para usar o Azure AI Video Indexer?
Não, o Azure AI Video Indexer fornece a integração de vários modelos de aprendizado de máquina em um pipeline. A indexação de um arquivo de vídeo ou áudio por meio do Azure AI Video Indexer recupera um conjunto completo de informações extraídas em uma linha do tempo compartilhada sem nenhuma habilidade de aprendizado de máquina ou conhecimento sobre algoritmos necessários por parte do cliente.
Que formatos de multimédia são suportados pelo Azure AI Video Indexer?
O Azure AI Video Indexer dá suporte aos formatos de mídia mais comuns. Consulte Matriz de suporte e limites de serviço do Azure AI Video Indexer.
Como carrego um arquivo de mídia no Azure AI Video Indexer e quais são as limitações?
No portal baseado na Web do Azure AI Video Indexer, você pode carregar um arquivo de mídia usando a caixa de diálogo de carregamento de arquivo ou apontando para uma URL que hospeda diretamente o arquivo de origem. Qualquer URL que hospede o conteúdo de mídia usando um iFrame ou código de incorporação não funcionará (veja o exemplo).
Posso transmitir um vídeo usando um player de vídeo HTML5 externo
Sim. Para acessar o arquivo de vídeo bruto do indexador de vídeo, você pode usar o método Get Video Source File Download Url para obter o URL do arquivo MP4 e colocá-lo na tag de vídeo.
Quantos arquivos posso costurar e renderizar em um projeto?
No Azure AI Video Indexer, você pode criar um projeto e adicionar vários arquivos para costurar e renderizar como um novo arquivo. O número de arquivos de origem é definido como 10 no site e 100 na API.
Quanto tempo leva o Azure AI Video Indexer para extrair insights de mídia?
O tempo necessário para indexar um arquivo de vídeo ou áudio, usando a API do Azure AI Video Indexer e a interface baseada na Web do Azure AI Video Indexer, depende de vários parâmetros, como o comprimento e a qualidade do arquivo, o número de informações encontradas no arquivo, entre outras coisas. Recomendamos que você execute alguns arquivos de teste com seu próprio conteúdo e faça uma média para ter uma ideia melhor.
Posso criar fluxos de trabalho personalizados para automatizar processos com o Azure AI Video Indexer?
Sim, você pode integrar o Azure AI Video Indexer em tecnologias sem servidor, como Aplicativos Lógicos, Fluxo e Azure Functions. Você pode encontrar mais detalhes sobre os conectores Logic App e Flow para o Azure AI Video Indexer aqui. Você pode ver alguns projetos de automação feitos por parceiros no repositório Azure AI Video Indexer Samples .
Em quais regiões do Azure o Azure AI Video Indexer está disponível?
Você pode ver quais regiões do Azure AI Video Indexer está disponível na página de regiões .
Posso personalizar os modelos do Azure AI Video Indexer para o meu caso de uso específico?
Sim. No Azure AI Video Indexer, você pode personalizar alguns dos modelos disponíveis para melhor atender às suas necessidades.
Por exemplo, nosso modelo Person suporta 1.000.000 de rostos de reconhecimento de celebridades prontos para uso, mas você também pode treiná-lo para reconhecer outros rostos que não estão nesse banco de dados.
Para obter detalhes, consulte artigos sobre como personalizar modelos de Pessoa, Marcas e Idioma .
Posso editar os vídeos na minha biblioteca?
Sim. Pressione o botão Editar vídeo na exibição da biblioteca ou o botão Abrir no editor na exibição do player para acessar a guia Projetos . Você pode criar um novo projeto e adicionar mais vídeos da sua biblioteca para editá-los juntos, uma vez que você terminar, você pode renderizar seu vídeo e baixar.
Se você quiser obter informações sobre seu novo vídeo, indexe-o com o Azure AI Video Indexer e ele aparecerá em sua biblioteca com seus insights.
Posso indexar vários fluxos ou canais de áudio?
Se houver vários fluxos de áudio, o Azure AI Video Indexer pegará o primeiro que encontrar e processará apenas esse fluxo. Em qualquer fluxo de áudio que o Azure AI Video Indexer processa, ele usa os diferentes canais (se houver) e os processa juntos como mono. Para manipulação de fluxos/canais, você pode usar comandos ffmpeg no arquivo antes de indexá-lo.
Não consigo encontrar minha nova conta ARM na lista de contas no site do Azure AI Video Indexer.
Para obter uma descrição detalhada sobre como alternar para o domínio correto, consulte Alternar entre locatários.
Azure AI Video Indexer ativado por perguntas do Arc
O que é o Azure AI Video Indexer Arc Enabled Extension?
Um aplicativo em execução em contêineres Kubernetes habilitados para Arc que pode ser implantado fora do Azure para extrair e consumir insights de áudio de seus arquivos de mídia. As versões futuras também fornecerão informações em vídeo.
O que é o Azure Arc?
O Azure Arc é uma ponte que estende a plataforma do Azure para ajudá-lo a criar aplicativos e serviços com a flexibilidade de executar em datacenters, na borda e em ambientes de várias nuvens. Desenvolva aplicativos nativos da nuvem com modelos consistentes de desenvolvimento, operações e segurança.
O que é necessário para participar na pré-visualização?
Para participar da visualização, você precisa de uma assinatura ativa do Azure, uma conexão com o Azure, um ambiente capaz de executar a extensão (consulte [requisitos no início rápido e permissão para ingressar na visualização. Pode submeter um pedido para aderir à pré-visualização aqui.
Como posso começar a usar o Azure AI Video Indexer habilitado pelo Arc?
Você pode seguir o início rápido e experimentar cenários automatizados do Kubernetes habilitados para Azure Arc com o Azure Arc Jumpstart.
Por que o download é tão grande?
Durante a instalação da extensão, os contêineres de aprendizado de máquina são baixados para a computação de borda. Alguns desses contêineres podem ter vários gigabytes de tamanho, e o tempo de download dependerá das condições da rede. Em alguns casos, o download pode levar mais de 15 minutos.
Preciso configurar o armazenamento para meu cluster Kubernetes?
Video Indexer ativado pelo Arc requer uma classe de armazenamento configurada com readwritemany. Se uma classe de armazenamento já estiver definida como padrão do cluster durante a instalação, ela será usada. Caso contrário, se você precisar configurar um armazenamento diferente, poderá passá-lo como uma propriedade durante a instalação da extensão.
Preciso configurar um ponto de extremidade frontend para a extensão Video Indexer?
Sim. A API da extensão Video Indexer está disponível através da extensão frontend. Você pode restringir o acesso a um endereço IP ou a um FQDN. Além disso, como toda a comunicação é feita através de protocolos de tráfego seguros, recomenda-se usar um certificado de CA válido e definir uma camada de segurança, como NSG ou firewall, para limitar o acesso a esse ponto final.
Como posso solucionar problemas do meu Azure AI Video Indexer habilitado pela instalação do Arc?
Consulte o guia de solução de problemas.
Perguntas sobre privacidade
Como o tráfego de rede é criptografado pelo Azure AI Video Indexer?
A comunicação entre um aplicativo cliente e uma conta do Azure AI Video Indexer é criptografada usando TLS (Transport Layer Security). O TLS é um protocolo criptográfico padrão que garante a privacidade e a integridade dos dados entre clientes e serviços pela Internet. Para obter mais informações sobre TLS, consulte Transport Layer Security. Video Indexer impõe um mínimo de TLS v1.2. Os clientes não podem controlar os processos de cifra, vamos escolher a primeira correspondência entre o cliente e o servidor indo de forte para mais fraco.
Os arquivos de vídeo e áudio são indexados pelo Azure AI Video Indexer armazenados?
Sim, a menos que você exclua o arquivo do Azure AI Video Indexer, usando o site ou a API do Azure AI Video Indexer, seus arquivos de vídeo e áudio são armazenados. Para a avaliação, os arquivos de vídeo e áudio indexados são armazenados na região do Azure Leste dos EUA. Caso contrário, seus arquivos de vídeo e áudio serão armazenados na conta de armazenamento de sua assinatura do Azure.
Onde o Azure AI Video Indexer armazena dados de clientes?
Por padrão, seus dados são replicados para a região emparelhada na qual você implantou a instância do Azure AI Video Indexer. Para regiões com requisitos de residência de dados, seus dados são sempre mantidos na mesma região. Para obter mais informações relacionadas, consulte outras perguntas sobre privacidade nesta seção.
Posso excluir meus arquivos armazenados no site do Azure AI Video Indexer?
Sim, você sempre pode excluir seus arquivos de vídeo e áudio, bem como quaisquer metadados e informações extraídos deles pelo Azure AI Video Indexer. Depois de excluir um arquivo do Azure AI Video Indexer, o arquivo e seus metadados e insights são removidos permanentemente do Azure AI Video Indexer. No entanto, se você tiver implementado sua própria solução de backup no armazenamento do Azure, o arquivo permanecerá em seu armazenamento do Azure.
Posso controlar o acesso do usuário à minha conta do Azure AI Video Indexer?
Sim, apenas os administradores de conta podem convidar e cancelar o convite de pessoas para suas contas, bem como atribuir quem tem privilégios de edição e quem tem acesso somente leitura.
Quem tem acesso aos meus ficheiros de vídeo e áudio que foram indexados e/ou armazenados pelo Azure AI Video Indexer e aos metadados e informações que foram extraídos?
Seu conteúdo de vídeo ou áudio que tenha público como configuração de privacidade pode ser acessado por qualquer pessoa que tenha o link para seu conteúdo de vídeo ou áudio e suas informações. Seu conteúdo de vídeo ou áudio que tenha privado como configuração de privacidade só pode ser acessado por usuários que foram convidados para a conta do conteúdo de vídeo ou áudio. A configuração de privacidade do seu conteúdo também se aplica aos metadados e informações extraídos pelo Azure AI Video Indexer. Você atribui a configuração de privacidade quando carrega seu arquivo de vídeo ou áudio. Você também pode alterar a configuração de privacidade após a indexação.
Que acesso tem a Microsoft aos meus ficheiros de vídeo ou áudio que foram indexados e/ou armazenados pelo Azure AI Video Indexer e aos metadados e informações que foram extraídos?
De acordo com os Termos do Azure Online Services (OST), você é totalmente proprietário do seu conteúdo e a Microsoft só acessará seu conteúdo e os metadados e informações que o Azure AI Video Indexer extrai do seu conteúdo de acordo com o OST e a Declaração de Privacidade da Microsoft.
Os modelos personalizados que crio na minha conta do Azure AI Video Indexer estão disponíveis para outras contas?
Não, os modelos personalizados que criar na sua conta não estão disponíveis para nenhuma outra conta. Atualmente, o Azure AI Video Indexer permite que você crie modelos personalizados de marcas, idiomas e pessoas em sua conta. Esses modelos só estão disponíveis na conta na qual você criou os modelos.
O conteúdo indexado pelo Video Indexer é mantido na região do Azure onde estou usando o Video Indexer?
Sim, o conteúdo e suas informações são mantidos na região do Azure (exceto para as regiões Sul de Cingapura e Brasil), a menos que você tenha uma configuração manual em sua assinatura do Azure que use várias regiões do Azure.
Os dados do cliente em uma região são replicados por motivos BCDR para a região emparelhada.
Qual é a política de privacidade do Azure AI Video Indexer?
O Azure AI Video Indexer é abrangido pela Declaração de Privacidade da Microsoft. A declaração de privacidade explica os dados pessoais que a Microsoft processa, como a Microsoft os processa e para que fins a Microsoft os processa. Para saber mais sobre privacidade, visite a Central de Confiabilidade da Microsoft.
Que certificações tem o Azure AI Video Indexer?
O Azure AI Video Indexer tem atualmente a certificação SOC. Para rever a certificação do Azure AI Video Indexer, consulte o Centro de Fidedignidade da Microsoft.
Qual é a diferença entre vídeos privados e públicos?
Quando os vídeos são carregados no Azure AI Video Indexer, pode escolher entre duas definições de privacidade: privada e pública. Os vídeos públicos são acessíveis a qualquer pessoa, incluindo utilizadores anónimos e não identificados. Os privados são restritos apenas aos membros da conta.
Tentei carregar um vídeo como público e ele foi sinalizado por conteúdo impróprio ou ofensivo, o que isso significa?
Ao carregar um vídeo no Azure AI Video Indexer, uma análise automática de conteúdo é feita por algoritmos e modelos para garantir que nenhum conteúdo inadequado seja apresentado publicamente. Se um vídeo for considerado suspeito por conter conteúdo explícito, não será possível defini-lo como público. No entanto, os membros da conta ainda podem acessá-lo como um vídeo privado (visualizá-lo, baixar os insights e artefatos extraídos e executar outras operações disponíveis para os membros da conta).
Aviso
Não recomendamos que você use dados diretamente da pasta de artefatos para fins de produção. Os artefatos são saídas intermediárias do processo de indexação. São essencialmente saídas brutas dos vários motores de IA que analisam os vídeos; O esquema de artefatos pode mudar ao longo do tempo.
Para definir o vídeo para acesso público, você pode:
Crie sua própria camada de interface (como aplicativo ou site) e use-a para interagir com o serviço Azure AI Video Indexer. Desta forma, o vídeo permanece privado no nosso site e os seus utilizadores podem interagir com ele através da sua interface. Por exemplo, você ainda pode obter os insights ou permitir a visualização do vídeo em sua própria interface.
Solicite uma revisão humana do conteúdo, o que resultaria na remoção da restrição, supondo que o conteúdo não seja explícito.
Essa opção pode ser explorada se o site do Azure AI Video Indexer for usado diretamente por seus usuários como a camada de interface e para exibição pública (não autenticada).
Perguntas sobre a API
Quais APIs o Azure AI Video Indexer oferece?
As APIs do Azure AI Video Indexer permitem indexação, extração de metadados, gerenciamento de ativos, tradução, incorporação, personalização de modelos e muito mais. Para obter informações mais detalhadas sobre como usar a API do Azure AI Video Indexer, consulte o portal do desenvolvedor do Azure AI Video Indexer.
Quais SDKs de cliente o Azure AI Video Indexer oferece?
Atualmente, não há SDKs de cliente oferecidos. A equipe do Azure AI Video Indexer está trabalhando nos SDKs e planeja entregá-los em breve.
Como faço para começar a usar a API do Azure AI Video Indexer?
Siga o Tutorial: introdução à API do Azure AI Video Indexer.
O que é um token de acesso à API e por que preciso dele?
A API do Azure AI Video Indexer contém uma API de Autorização e uma API de Operações. A API de Autorizações contém chamadas que lhe dão um token de acesso. Cada chamada efetuada para a API de Operações deve estar associada a um token de acesso que corresponda ao âmbito de autorização da chamada.
Os tokens de acesso são necessários para usar as APIs do Azure AI Video Indexer para fins de segurança. Isso garante que todas as chamadas sejam feitas por você ou por aqueles que têm permissões de acesso à sua conta.
Qual é a diferença entre o token de acesso à conta, o token de acesso do usuário e o token de acesso ao vídeo?
- Nível de conta – os tokens de acesso de nível de conta permitem realizar operações ao nível de conta ou de vídeo. Por exemplo, carregue um vídeo, liste todos os vídeos, obtenha informações sobre o vídeo.
- Nível de utilizador – os tokens de acesso de nível de utilizador permitem realizar operações ao nível de utilizador. Permitem, por exemplo, obter contas associadas.
- Nível de vídeo – os tokens de acesso de nível de vídeo permitem realizar operações num vídeo específico. Permitem, por exemplo, obter informações de vídeo, transferir legendas, obter widgets, etc.
Com que frequência preciso obter um novo token de acesso? Quando expiram os tokens de acesso?
Os tokens de acesso expiram a cada hora, então você precisa gerar um novo token de acesso a cada hora.
Quais são as opções de login no portal do desenvolvedor do Azure AI Video Indexer?
Consulte uma nota de versão sobre as informações de login.
Depois de registrar sua conta de e-mail usando um provedor de identidade, você não pode usar essa conta de e-mail com outro provedor de identidade.
Onde os ativos JSON (como insights, transcrição, etc.), associados a vídeos indexados, são armazenados?
Eles são armazenados pelo serviço Azure AI Video Indexer e podem ser buscados com as APIs Get Video Index e Get Video Artifact Download Url .
Depois que um vídeo é indexado, há alguma cobrança adicional para chamar a API?
Não há cobranças adicionais do Azure AI Video Indexer para chamar a API.
Qual é a taxa de transferência de ingestão aproximada em MBs por segundo? Quantos pedidos por minuto são permitidos?
120 solicitações por minuto são padrão, mas podem ir até 600 solicitações por minuto.
Perguntas sobre faturação
Quanto custa o Azure AI Video Indexer?
O Azure AI Video Indexer usa um modelo de preços simples de pagamento conforme o uso com base na duração da entrada de conteúdo que você indexa. Podem ser aplicadas taxas adicionais para codificação, streaming, armazenamento, uso da rede e unidades reservadas de mídia. Para obter mais informações, consulte a página de preços.
Quando sou cobrado pelo uso do Azure AI Video Indexer?
Quando enviar um vídeo para indexação, o utilizador definirá a indexação para análise de vídeo, análise de áudio ou ambas. Isto determinará que SKUs serão cobrados. Em caso de erro de nível crítico durante o processamento, será devolvido um código de erro como resposta. Nesse caso, não ocorre faturação. Um erro crítico pode ser causado por um erro no nosso código ou uma falha crítica numa dependência interna do serviço. Erros como identificação ou extração de informações incorretas não são considerados críticos e é devolvida uma resposta. Sempre que seja devolvida uma resposta válida (sem ser código de erro), ocorre faturação.
O Azure AI Video Indexer oferece uma conta de avaliação?
Sim, o Azure AI Video Indexer oferece uma conta de avaliação que fornece 2.400 minutos de indexação gratuitos ao usar o site do Azure AI Video Indexer ou a API do Azure AI Video Indexer (consulte o portal do desenvolvedor).
Como desativar resultados para modelos de IA específicos
Como excluir um resultado específico de um modelo público de IA?
Envie uma explicação detalhada do seu pedido para "Video Indexer Customer Support" visupport@microsoft.com. Incluindo: modelo de IA ao qual você está se referindo, o resultado que você gostaria de excluir, a razão pela qual devemos excluir os resultados e uma explicação do motivo pelo qual você está perguntando isso.
Quanto tempo demora?
O processamento do pedido pode demorar algumas semanas.