Ativar roupas em destaque de uma pessoa observada

Ao indexar um vídeo usando as configurações avançadas de vídeo do Azure AI Video Indexer, você pode exibir as roupas em destaque de uma pessoa observada. A visão fornece momentos dentro do vídeo onde as pessoas-chave são destacadas e claramente visíveis, incluindo as coordenadas das pessoas, o carimbo de data/hora e o quadro da foto. Essa perceção permite publicidade contextual em vídeo de alta qualidade, onde anúncios de roupas relevantes são combinados com o tempo específico dentro do vídeo em que são vistos.

Este artigo discute como visualizar a visão de roupas em destaque e como as imagens de roupas em destaque são classificadas.

Ver um vídeo de introdução

Você pode ver o vídeo curto a seguir que discute como visualizar e usar a visão de roupas em destaque.

Ver roupa em destaque

A visão de vestuário em destaque está disponível ao indexar seu arquivo, escolhendo a opção Avançado -> Vídeo avançado ou Predefinição avançada de vídeo + áudio (em Indexação de vídeo + áudio). A indexação padrão não inclui essa perceção.

As imagens de roupas em destaque são classificadas com base em alguns dos seguintes fatores: momentos-chave do vídeo, duração da pessoa aparece, emoções baseadas em texto e eventos de áudio. Os insights ocultam o quadro de classificação mais alta por cena, o que permite que você produza anúncios contextuais por cena ao longo do vídeo. O arquivo JSON é classificado pela sequência de cenas no vídeo, com cada cena tendo o quadro melhor avaliado como resultado.

Nota

A perceção de roupas em destaque só pode ser exibida a partir do arquivo de artefato, e a perceção não está no site do Azure AI Video Indexer.

1. No canto superior direito, selecione para baixar o arquivo zip do artefato: Download ->Artifact (ZIP)
2. Abrir featuredclothing.zip.

O arquivo .zip contém dois objetos:

• featuredclothing.map.json - O arquivo contém ocorrências de cada roupa em destaque, com as seguintes propriedades:

  • id – índice de classificação ("id": 1 é a roupa mais importante).
  • confidence – a pontuação da roupa em destaque.
  • frameIndex – a melhor armação da roupa.
  • timestamp – correspondente ao frameIndex.
  • opBoundingBox – caixa delimitadora da pessoa.
  • faceBoundingBox – caixa delimitadora do rosto da pessoa, se detetada.
  • fileName – onde se guarda a melhor armação da roupa.
  • sceneID - A cena onde a cena aparece.

  Um exemplo da roupa em destaque com "sceneID": 1.

  "instances": [
    	{
      		"confidence": 0.07,
  			"faceBoundingBox": {},
  			"fileName": "frame_100.jpg",
      		"frameIndex": 100,
      		"opBoundingBox": {
          			"x": 0.09062,
          			"y": 0.4,
  				"width": 0.11302,
          			"height": 0.59722
  				},
     			 "timestamp": "0:00:04",
      		"personName": "Observed Person #1",
      		"sceneId": 1
    	}
  

• featuredclothing.frames.map – esta pasta contém imagens das melhores molduras em que a roupa em destaque apareceu, correspondendo à fileName propriedade em cada instância em featuredclothing.map.json.

Limitações e pressupostos

É importante observar as limitações das roupas em destaque para evitar ou mitigar os efeitos de falsas deteções de imagens com baixa qualidade ou baixa relevância. 

• A pré-condição para a roupa em destaque é que a pessoa que usa a roupa pode ser encontrada na perceção das pessoas observadas.
• Se o rosto de uma pessoa que usa a roupa em destaque não for detetado, os resultados não incluem a caixa delimitadora de rostos.
• Se uma pessoa em um vídeo usa mais de uma roupa, o algoritmo seleciona sua melhor roupa como uma única imagem de roupa em destaque.
• Quando colocadas, as faixas são otimizadas para lidar com pessoas observadas que na maioria das vezes aparecem na frente.
• Deteções erradas podem ocorrer quando as pessoas estão sobrepostas.
• Quadros contendo pessoas desfocadas são mais propensos a resultados de baixa qualidade.

Para obter mais informações, consulte as limitações das pessoas observadas.