Sdílet prostřednictvím


Získání přehledů detekce pozorovaných lidí a spárovaných tváří

Detekce pozorovaných lidí, spárované tváře, zjištěné oděvy

Důležité

Přístup k funkcím rozpoznávání tváře, přizpůsobení a celebrit je omezený na základě kritérií způsobilosti a použití, aby bylo možné podporovat naše zásady zodpovědné umělé inteligence. Funkce rozpoznávání tváře, přizpůsobení a rozpoznávání celebrit jsou dostupné jenom pro zákazníky a partnery spravované Microsoftem. Pro přístup použijte formulář pro příjem rozpoznávání tváře.

Pozorované rozpoznávání a spárované tváře automaticky rozpozná a odpovídají lidem v mediálních souborech. Pozorované rozpoznávání a spárované tváře můžou být nastaveny tak, aby zobrazovaly přehledy o lidech, jejich oblečení a přesný časový rámec jejich vzhledu.

Na webovém portálu se výsledné přehledy zobrazují v seznamu zařazených do kategorií na kartě Přehledy, karta obsahuje miniaturu každé osoby a id. Kliknutím na miniaturu osoby se zobrazí odpovídající osoba (odpovídající tvář v přehledu Lidé). Přehledy se také generují v seznamu zařazeného do kategorií v souboru JSON, který obsahuje ID miniatury osoby, procento času zobrazeného v souboru, odkaz wiki (pokud jsou celebrity) a úroveň spolehlivosti.

Detekce pozorovaných lidí, zjištěná oblečení a odpovídající případy použití tváří

  • Zlepšení efektivity díky hlubokému hledání odpovídajících lidí v organizačních archivech pro získání přehledu o konkrétních celebritách, například při vytváření propagačních a přívěsů.
  • Lepší efektivita při vytváření příběhů funkcí, například hledání lidí, kteří mají červené tričko v archivech fotbalového zápasu v novinách nebo sportovní agentury.
  • Vytvořte souhrn z dlouhého videa, jako jsou soudní důkazy o vzhledu konkrétní osoby ve videu, pomocí ID stejné zjištěné osoby.
  • Seznamte se s trendy v průběhu času a analyzujte je například – jak se zákazníci pohybují v nákupním centru nebo kolik času tráví při rezervaci.

Odpovídající tváře a zjištěné funkce oblečení jsou k dispozici při indexování souboru výběrem přednastavení indexování zvuku Advanced ->Video + audio.

Zobrazení kódu JSON přehledu pomocí webového portálu

Po nahrání a indexování videa jsou přehledy k dispozici ve formátu JSON ke stažení pomocí webového portálu.

  1. Vyberte kartu Knihovna.
  2. Vyberte multimédia, se kterými chcete pracovat.
  3. Vyberte Stáhnout a přehledy (JSON). Soubor JSON se otevře na nové kartě prohlížeče.
  4. Vyhledejte pár klíčů popsaný v ukázkové odpovědi.

Použití rozhraní API

  1. Použijte požadavek Získat index videa. Doporučujeme předat &includeSummarizedInsights=false.
  2. Vyhledejte páry klíčů popsané v ukázkové odpovědi.

Příklad odpovědi

"observedPeople": [
    {
        "id": 1,
        "thumbnailId": "d09ad62e-e0a4-42e5-8ca9-9a640c686596",
        "clothing": [
            {
                "id": 1,
                "type": "sleeve",
                "properties": {
                    "length": "short"
                }
            },
            {
                "id": 2,
                "type": "pants",
                "properties": {
                    "length": "short"
                }
            }
        ],
        "matchingFace": {
            "id": 1310,
            "confidence": 0.3819
        },
        "instances": [
            {
                "adjustedStart": "0:00:34.8681666",
                "adjustedEnd": "0:00:36.0026333",
                "start": "0:00:34.8681666",
                "end": "0:00:36.0026333"
            },
            {
                "adjustedStart": "0:00:36.6699666",
                "adjustedEnd": "0:00:36.7367",
                "start": "0:00:36.6699666",
                "end": "0:00:36.7367"
            },
            {
                "adjustedStart": "0:00:37.2038333",
                "adjustedEnd": "0:00:39.6729666",
                "start": "0:00:37.2038333",
                "end": "0:00:39.6729666"
            }
        ]
    }
]

Důležité

Je důležité si přečíst přehled poznámek transparentnosti pro všechny funkce VI. Každý přehled má také vlastní poznámky k transparentnosti:

Poznámky pozorovaných lidí k detekci a spárovaným tvářím

  • Lidé se obvykle nezjistí, pokud se zobrazí malé (minimální výška osoby je 100 pixelů).
  • Maximální velikost rámce je plná vysoká definice (FHD).
  • Video s nízkou kvalitou (například podmínky tmavého osvětlení) může ovlivnit výsledky detekce.
  • Doporučená frekvence snímků minimálně 30 FPS.
  • Doporučený vstup videa by měl obsahovat až 10 lidí v jednom rámečku. Tato funkce může pracovat s více lidmi v jednom rámci, ale výsledek detekce načte až 10 lidí v rámci s nejvyšší jistotou detekce.
  • Lidé s podobným oblečením: (například lidé nosí uniformy, hráči ve sportovních hrách) mohou být zjištěni jako stejná osoba se stejným číslem ID.
  • Obstrukce – mohou se zde vyskytovat chyby, kdy dochází k překážkám (scéna/samoobsluhodnost nebo obstrukce jinými lidmi).
  • Pozice: Stopy můžou být rozdělené z důvodu různých pozic (zadní/přední)
  • Vzhledem k tomu, že detekce oblečení závisí na viditelnosti těla osoby, přesnost je vyšší, pokud je osoba plně viditelná. Pokud je člověk bez oblečení, může dojít k chybám. V tomto scénáři nebo jiných špatných viditelnosti mohou být výsledky uvedeny, jako jsou dlouhé kalhoty a sukně nebo šaty.

Zjištěná detekce lidí a součásti odpovídajících tváří

Komponenta Definice
Zdrojový soubor Uživatel nahraje zdrojový soubor pro indexování.
Detection Mediální soubor je sledován k detekci pozorovaných lidí a jejich oblečení. Například košile s dlouhým rukávem, šaty nebo dlouhé kalhoty. Chcete-li zjistit, musí se v médiu objevit celé horní tělo osoby.
Místní seskupení Zjištěné pozorované tváře se filtrují do místních skupin. Pokud je osoba zjištěna více než jednou, vytvoří se pro tuto osobu více instancí pozorovaných tváří.
Porovnávání a klasifikace Pozorované instance lidí se shodují s tvářemi. Pokud je známá celebrita, je pozorovaná osoba pojmenována. Počet výskytů pozorovaných osob se dá spárovat se stejnou tváří.
Hodnota spolehlivosti Odhadovaná úroveň spolehlivosti každé pozorované osoby se vypočítá v rozsahu 0 až 1. Skóre spolehlivosti představuje jistotu přesnosti výsledku. Například 82% jistota je reprezentována jako skóre 0,82.

Ukázkový kód

Zobrazit všechny ukázky pro VI