Získání přehledů detekce pozorovaných lidí a spárovaných tváří
Detekce pozorovaných lidí, spárované tváře, zjištěné oděvy
Důležité
Přístup k funkcím rozpoznávání tváře, přizpůsobení a celebrit je omezený na základě kritérií způsobilosti a použití, aby bylo možné podporovat naše zásady zodpovědné umělé inteligence. Funkce rozpoznávání tváře, přizpůsobení a rozpoznávání celebrit jsou dostupné jenom pro zákazníky a partnery spravované Microsoftem. Pro přístup použijte formulář pro příjem rozpoznávání tváře.
Pozorované rozpoznávání a spárované tváře automaticky rozpozná a odpovídají lidem v mediálních souborech. Pozorované rozpoznávání a spárované tváře můžou být nastaveny tak, aby zobrazovaly přehledy o lidech, jejich oblečení a přesný časový rámec jejich vzhledu.
Na webovém portálu se výsledné přehledy zobrazují v seznamu zařazených do kategorií na kartě Přehledy, karta obsahuje miniaturu každé osoby a id. Kliknutím na miniaturu osoby se zobrazí odpovídající osoba (odpovídající tvář v přehledu Lidé). Přehledy se také generují v seznamu zařazeného do kategorií v souboru JSON, který obsahuje ID miniatury osoby, procento času zobrazeného v souboru, odkaz wiki (pokud jsou celebrity) a úroveň spolehlivosti.
Detekce pozorovaných lidí, zjištěná oblečení a odpovídající případy použití tváří
- Zlepšení efektivity díky hlubokému hledání odpovídajících lidí v organizačních archivech pro získání přehledu o konkrétních celebritách, například při vytváření propagačních a přívěsů.
- Lepší efektivita při vytváření příběhů funkcí, například hledání lidí, kteří mají červené tričko v archivech fotbalového zápasu v novinách nebo sportovní agentury.
- Vytvořte souhrn z dlouhého videa, jako jsou soudní důkazy o vzhledu konkrétní osoby ve videu, pomocí ID stejné zjištěné osoby.
- Seznamte se s trendy v průběhu času a analyzujte je například – jak se zákazníci pohybují v nákupním centru nebo kolik času tráví při rezervaci.
Odpovídající tváře a zjištěné funkce oblečení jsou k dispozici při indexování souboru výběrem přednastavení indexování zvuku Advanced ->Video + audio.
Zobrazení kódu JSON přehledu pomocí webového portálu
Po nahrání a indexování videa jsou přehledy k dispozici ve formátu JSON ke stažení pomocí webového portálu.
- Vyberte kartu Knihovna.
- Vyberte multimédia, se kterými chcete pracovat.
- Vyberte Stáhnout a přehledy (JSON). Soubor JSON se otevře na nové kartě prohlížeče.
- Vyhledejte pár klíčů popsaný v ukázkové odpovědi.
Použití rozhraní API
- Použijte požadavek Získat index videa. Doporučujeme předat
&includeSummarizedInsights=false
. - Vyhledejte páry klíčů popsané v ukázkové odpovědi.
Příklad odpovědi
"observedPeople": [
{
"id": 1,
"thumbnailId": "d09ad62e-e0a4-42e5-8ca9-9a640c686596",
"clothing": [
{
"id": 1,
"type": "sleeve",
"properties": {
"length": "short"
}
},
{
"id": 2,
"type": "pants",
"properties": {
"length": "short"
}
}
],
"matchingFace": {
"id": 1310,
"confidence": 0.3819
},
"instances": [
{
"adjustedStart": "0:00:34.8681666",
"adjustedEnd": "0:00:36.0026333",
"start": "0:00:34.8681666",
"end": "0:00:36.0026333"
},
{
"adjustedStart": "0:00:36.6699666",
"adjustedEnd": "0:00:36.7367",
"start": "0:00:36.6699666",
"end": "0:00:36.7367"
},
{
"adjustedStart": "0:00:37.2038333",
"adjustedEnd": "0:00:39.6729666",
"start": "0:00:37.2038333",
"end": "0:00:39.6729666"
}
]
}
]
Důležité
Je důležité si přečíst přehled poznámek transparentnosti pro všechny funkce VI. Každý přehled má také vlastní poznámky k transparentnosti:
Poznámky pozorovaných lidí k detekci a spárovaným tvářím
- Lidé se obvykle nezjistí, pokud se zobrazí malé (minimální výška osoby je 100 pixelů).
- Maximální velikost rámce je plná vysoká definice (FHD).
- Video s nízkou kvalitou (například podmínky tmavého osvětlení) může ovlivnit výsledky detekce.
- Doporučená frekvence snímků minimálně 30 FPS.
- Doporučený vstup videa by měl obsahovat až 10 lidí v jednom rámečku. Tato funkce může pracovat s více lidmi v jednom rámci, ale výsledek detekce načte až 10 lidí v rámci s nejvyšší jistotou detekce.
- Lidé s podobným oblečením: (například lidé nosí uniformy, hráči ve sportovních hrách) mohou být zjištěni jako stejná osoba se stejným číslem ID.
- Obstrukce – mohou se zde vyskytovat chyby, kdy dochází k překážkám (scéna/samoobsluhodnost nebo obstrukce jinými lidmi).
- Pozice: Stopy můžou být rozdělené z důvodu různých pozic (zadní/přední)
- Vzhledem k tomu, že detekce oblečení závisí na viditelnosti těla osoby, přesnost je vyšší, pokud je osoba plně viditelná. Pokud je člověk bez oblečení, může dojít k chybám. V tomto scénáři nebo jiných špatných viditelnosti mohou být výsledky uvedeny, jako jsou dlouhé kalhoty a sukně nebo šaty.
Zjištěná detekce lidí a součásti odpovídajících tváří
Komponenta | Definice |
---|---|
Zdrojový soubor | Uživatel nahraje zdrojový soubor pro indexování. |
Detection | Mediální soubor je sledován k detekci pozorovaných lidí a jejich oblečení. Například košile s dlouhým rukávem, šaty nebo dlouhé kalhoty. Chcete-li zjistit, musí se v médiu objevit celé horní tělo osoby. |
Místní seskupení | Zjištěné pozorované tváře se filtrují do místních skupin. Pokud je osoba zjištěna více než jednou, vytvoří se pro tuto osobu více instancí pozorovaných tváří. |
Porovnávání a klasifikace | Pozorované instance lidí se shodují s tvářemi. Pokud je známá celebrita, je pozorovaná osoba pojmenována. Počet výskytů pozorovaných osob se dá spárovat se stejnou tváří. |
Hodnota spolehlivosti | Odhadovaná úroveň spolehlivosti každé pozorované osoby se vypočítá v rozsahu 0 až 1. Skóre spolehlivosti představuje jistotu přesnosti výsledku. Například 82% jistota je reprezentována jako skóre 0,82. |