Partilhar via


Usar resumo textual (visualização)

Este artigo mostra como usar o resumo textual com o Azure AI Video Indexer. Este exemplo usa implantações de modelo do Azure OpenAI.

Nota

Este recurso só funciona com uma conta padrão. Crie uma conta padrão.

Pré-requisitos

  • Analise a visão geral da sumarização texual.

Cloud

  • Uma conta do Azure AI Video Indexer conectada a uma conta do Azure OpenAI.

  • Acesso concedido ao Azure OpenAI na subscrição pretendida do Azure. Atualmente, o acesso a este serviço é concedido apenas por pedido. Pode preencher o formulário para pedir acesso ao Azure OpenAI.

  • Uma implantação do Azure OpenAI gpt-35-turbo ou gpt-4 . Para se beneficiar de resumos baseados em quadros-chave, você deve selecionar um modelo de IA aberta do Azure que aceite entrada visual. Leia mais aqui: Modelos de Serviço OpenAI do Azure.

  • O filtro Prompt Shields para ataques diretos (jailbreak) deve ser adicionado à implantação. Leia mais aqui: Usar filtros de conteúdo (visualização) com o Serviço Azure OpenAI.

  • É recomendável configurar filtros de conteúdo nocivo para categorias como "Violência", "Ódio", "Sexual" e "Automutilação". Embora esses filtros não sejam obrigatórios, você deve defini-los como "Médio" ou "Baixo" para filtrar o conteúdo de pelo menos o nível Médio de nocividade. Essa configuração garante que o conteúdo com uma classificação de nocividade média ou superior seja bloqueado. Para maior segurança, pode optar por uma configuração mais rigorosa. Uma vez configurado, salve as configurações do filtro de conteúdo.

  • Um vídeo carregado na sua biblioteca do Azure AI Video Indexer.

Nota

O Azure AI Video Indexer não consegue se conectar a modelos ajustados.

Edge

O Azure AI Video Indexer habilitado pelo Arc permite que você use o Azure AI Video Indexer em dispositivos de borda. A seguir estão os requisitos técnicos para este caso de uso:

  • Video Indexer Ativado pelo Arc do número de versão 1.1.23 ou superior.
  • Requisitos de hardware: GPU ou CPU Intel. A execução na CPU pode ser muito lenta e não recomendada. Recomendamos o uso da Nvidia V100 ou superior. Se houver vários nós de GPU, você pode adicionar um seletor de nó para selecionar o nó desejado.
  • Usar quadros-chave como parte do resumo requer Nvidia A100 ou superior.
  • O Resumo de Vídeo Textual no Edge usa apenas o modelo Phi3.5. Para obter mais informações sobre hardware, consulte as informações de lançamento oficial do Phi 3.5.

Abra páginas da Web no seu navegador

É mais fácil seguir estas instruções se já tiver as páginas Web necessárias abertas. Copie e cole os seguintes parâmetros no seu editor de texto favorito. Aqui está uma lista para você começar:

  • ID da conta VI:
  • ID do arquivo de vídeo:
  • Nome da implantação:
  • Token de acesso:
  1. Abra o portal do Azure em uma guia ou janela e entre.
    1. Navegue até a página da conta do Azure AI Video Indexer para obter a ID da conta.
    2. Navegue até a página da conta do Azure OpenAI
      1. No menu, selecione Modelo de implantações e, em seguida, selecione Gerenciar implantações. O Azure OpenAI Studio é aberto. Copie o Nome da Implantação que você deseja usar.
  2. Abra o portal Web do Azure AI Video Indexer noutro separador ou janela e inicie sessão.
    1. Navegue até a página da biblioteca, escolha um vídeo e clique com o botão direito do mouse nele para obter o ID do arquivo de vídeo.
  3. Abra a API do Azure AI Video Indexer em outra guia ou janela e entre.

Gerar um resumo de texto com ou sem quadros-chave

Você pode usar o portal da Web do Azure AI Video Indexer para resumir texto.

  1. Se você ainda não tiver o portal da Web aberto, abra o portal da Web do Azure AI Video Indexer.
  2. Carregue um ficheiro e aguarde até que seja indexado.
  3. Selecione o vídeo para navegar até a página de mídia.
  4. Se você quiser usar quadros-chave para produzir o resumo, marque a caixa de seleção Incluir insights de quadros-chave visuais para obter um resumo de melhor qualidade.
  5. Selecione Gerar resumo. O resumo textual é gerado.

Nota

Se não estiver a ver o botão Gerar resumo, poderá estar a utilizar uma conta de avaliação. Crie uma conta padrão para usar esse recurso.

Personalizações de resumo

Depois que o resumo é gerado, você pode fazer ajustes nele personalizando o estilo do resumo ou alterando a implantação do modelo.

Personalizar estilo de resumo

Você também pode personalizar o resumo selecionando o ícone Personalizar resumo . Você pode escolher entre comprimentos de resumo Curto, **Médio ou Longo , e você pode escolher Neutro, Casual ou Formal como um estilo de resumo. Depois de fazer suas escolhas, selecione Gerar novamente.

Alterar a implantação do modelo

  1. Selecione o ícone Personalizar resumo .
  2. Selecione a implantação do modelo que você deseja usar na lista suspensa Implantação do modelo.
  3. Selecione Gerar novamente.

Nota

Lembre-se de que a implantação do modelo é uma combinação do modelo e dos filtros. Além disso, toda vez que você personaliza o resumo de texto, ele representa uma solicitação API PUT.

Resolução de Problemas

Antes de procurar soluções específicas, certifique-se de que criou os recursos na secção Pré-requisitos do documento.

Gerar resumo não aparece

Talvez você não tenha conectado sua conta do Azure OpenAI à conta do Azure AI Video Indexer corretamente.

Não foi possível gerar resumo

  • Você precisa adicionar filtros de conteúdo à implantação para evitar a exibição de conteúdo prejudicial. Volte para o estúdio do Azure OpenAI e adicione filtros à sua implantação.
  • Você pode ter criado um filtro de conteúdo permissivo para conteúdo sensível ou prejudicial. O filtro de conteúdo precisa ser pelo menos Médio. Se você definir o filtro de conteúdo como Médio E o conteúdo prejudicial permanecer no vídeo, o filtro será acionado. Neste caso, não há solução.
  • Você pode não ter solicitado uma transcrição ou pode não haver informações suficientes geradas durante o processo de indexação.
  • Você pode estar usando uma predefinição avançada.
  • O vídeo pode não ter áudio suficiente para criar uma transformação.

Não é possível usar uma implantação de modelo ou implantação ausente

  • Talvez você não tenha criado uma implantação.
  • Alguém pode ter alterado ou excluído o modelo implantado.

Limitação

Pode haver demasiados pedidos a serem enviados para o VI. Aguarde alguns minutos e tente novamente.

Você recebe o erro "filtro não encontrado"

Se você receber um erro de filtro não encontrado, receberá um erro detalhado descrevendo o que está faltando. O erro é semelhante a este, mas pode ter detalhes sobre outras coisas ausentes:

ErrorType":"SUMMARY_FILTERS_NOT_FOUND","Message":"Couldn't generate a summary because the model needs to be set with the right content filters to avoid showing harmful content. Input filter 'Jailbreak' must be enabled with action set to 'Annotate and block'. Trace id: '00000000-0000-0000-0000-000000000000'.

Nota

O filtro de jailbreak só é necessário ao usar um resumo baseado em quadros-chave ou um resumo regular, a partir de 1º de novembro de 2024.

Para resolver o problema do jailbreak:

  1. Selecione Ir para o Azure Open AI studio.
  2. Selecione Implementações.
  3. Selecione a implantação com a qual você está trabalhando.
  4. Selecione Editar.
  5. Configure os filtros para ter pelo menos o nível Médio para cada categoria.
  6. Aplique proteções rápidas para ataques de jailbreak.
  7. Selecione Criar filtro.

Outras considerações

É recomendável criar o Azure AI Video Indexer e as contas do Azure OpenAI na mesma região ou você pode ter problemas de desempenho.