Abilitare l'abbigliamento in primo piano di una persona osservata

Quando si indicizza un video usando le impostazioni video avanzate di Azure AI Video Indexer, è possibile visualizzare l'abbigliamento in primo piano di una persona osservata. Le informazioni dettagliate forniscono momenti all'interno del video in cui le persone chiave sono in primo piano e chiaramente visibili, incluse le coordinate delle persone, il timestamp e il fotogramma dello scatto. Queste informazioni dettagliate consentono annunci contestuali in-video di alta qualità, in cui gli annunci di abbigliamento pertinenti vengono confrontati con il tempo specifico all'interno del video in cui vengono visualizzati.

Questo articolo illustra come visualizzare le informazioni dettagliate sull'abbigliamento in primo piano e come vengono classificate le immagini di abbigliamento in primo piano.

Visualizzare un video introduttivo

È possibile visualizzare il breve video seguente che illustra come visualizzare e usare le informazioni dettagliate sull'abbigliamento in primo piano.

Visualizzazione dell'abbigliamento in primo piano

Le informazioni dettagliate sull'abbigliamento in primo piano sono disponibili per l'indicizzazione del file scegliendo l'opzione Avanzate video> o Avanzate video e audio preimpostato (in Video e indicizzazione audio). L'indicizzazione standard non include queste informazioni dettagliate.

Le immagini di abbigliamento in primo piano sono classificate in base ad alcuni dei fattori seguenti: momenti chiave del video, durata della visualizzazione della persona, emozioni basate su testo ed eventi audio. Le informazioni dettagliate privato del fotogramma di classificazione più alto per scena, che consente di produrre annunci contestuali per scena in tutto il video. Il file JSON viene classificato in base alla sequenza di scene nel video, con ogni scena con il fotogramma con la classificazione superiore come risultato.

Nota

Le informazioni dettagliate sull'abbigliamento in primo piano possono essere visualizzate solo dal file di artefatto e le informazioni dettagliate non si trovano nel sito Web di Azure AI Video Indexer.

1. Nell'angolo in alto a destra selezionare per scaricare il file ZIP dell'artefatto: Download ->Artifact (ZIP)
2. featuredclothing.zip aperti.

Il file .zip contiene due oggetti:

• featuredclothing.map.json - Il file contiene istanze di ogni abbigliamento in primo piano, con le proprietà seguenti:

  • id – indice di classificazione ("id": 1 è l'abbigliamento più importante).
  • confidence – punteggio dell'abbigliamento in primo piano.
  • frameIndex – il miglior telaio dell'abbigliamento.
  • timestamp : corrispondente al frameIndex.
  • opBoundingBox – rettangolo di selezione della persona.
  • faceBoundingBox – rettangolo di selezione della faccia della persona, se rilevato.
  • fileName – dove viene salvata la migliore cornice dell'abbigliamento.
  • sceneID - la scena in cui viene visualizzata la scena.

  Esempio di abbigliamento in primo piano con "sceneID": 1.

  "instances": [
    	{
      		"confidence": 0.07,
  			"faceBoundingBox": {},
  			"fileName": "frame_100.jpg",
      		"frameIndex": 100,
      		"opBoundingBox": {
          			"x": 0.09062,
          			"y": 0.4,
  				"width": 0.11302,
          			"height": 0.59722
  				},
     			 "timestamp": "0:00:04",
      		"personName": "Observed Person #1",
      		"sceneId": 1
    	}
  

• featuredclothing.frames.map : questa cartella contiene immagini dei migliori frame in cui sono presenti gli abiti in primo piano, corrispondenti alla fileName proprietà in ogni istanza di featuredclothing.map.json.

Limitazioni e presupposti

È importante notare le limitazioni dell'abbigliamento in primo piano per evitare o attenuare gli effetti di falsi rilevamenti di immagini con bassa qualità o bassa pertinenza. 

• Precondizione per l'abbigliamento in primo piano è che la persona che indossa i vestiti si può trovare nelle informazioni sulle persone osservate.
• Se il volto di una persona che indossa l'abbigliamento in primo piano non viene rilevato, i risultati non includono il rettangolo di selezione dei visi.
• Se una persona in un video indossa più di un outfit, l'algoritmo seleziona il suo outfit migliore come un'unica immagine di abbigliamento in primo piano.
• In caso di posa, le tracce sono ottimizzate per gestire le persone osservate che più spesso appaiono sul fronte.
• I rilevamenti errati possono verificarsi quando le persone si sovrappongono.
• I fotogrammi contenenti persone sfocate sono più soggetti a risultati di bassa qualità.

Per altre informazioni, vedere le limitazioni delle persone osservate.