Použití řídicího panelu ke zlepšení aplikace
Důležité
Služba LUIS bude vyřazena 1. října 2025 a od 1. dubna 2023 nebudete moct vytvářet nové prostředky LUIS. Doporučujeme migrovat aplikace LUIS do porozumění konverzačnímu jazyku, abyste mohli využívat další podporu produktů a vícejazyčné funkce.
Vyhledejte a opravte problémy se záměry vytrénované aplikace, když používáte ukázkové promluvy. Řídicí panel zobrazuje celkové informace o aplikaci se zvýrazněnými záměry, které by se měly opravit.
Kontrola analýzy řídicího panelu je iterativní proces, který se opakuje při změně a vylepšování modelu.
Tato stránka nebude obsahovat relevantní analýzu aplikací, které nemají v záměrech žádné ukázkové promluvy, označované jako aplikace určené jen pro vzory.
Jaké problémy je možné opravit z řídicího panelu?
Tři problémy vyřešené na řídicím panelu:
| Problém | Barva grafu | Vysvětlení |
|---|---|---|
| Nerovnováha dat | - | K tomu dochází, když se množství ukázkových promluv výrazně liší. Všechny záměry musí mít zhruba stejný počet ukázkových promluv – s výjimkou záměru None (Žádný). Mělo by mít v aplikaci pouze 10 %-15 % celkového množství promluv. Pokud jsou data nevyvážená, ale přesnost záměru překračuje určitou prahovou hodnotu, tato nerovnováha se neohlásí jako problém. Začněte s tímto problémem – může to být původní příčina ostatních problémů. |
| Nejasné předpovědi | Orange | K tomu dochází, když je nejlepší záměr a skóre dalšího záměru dostatečně blízko, aby se mohly obrátit na další trénování kvůli negativnímu vzorkování nebo více ukázkových promluv přidaných k záměru. |
| Nesprávné předpovědi | Červený | K tomu dochází v případě, že ukázková promluva není předpovězena pro označený záměr (záměr je in). |
Správné předpovědi jsou reprezentovány barvou modrou.
Na řídicím panelu se zobrazí tyto problémy a řekne vám, které záměry jsou ovlivněné, a navrhne, co byste měli udělat, abyste aplikaci vylepšili.
Před natrénovanými aplikacemi
Než aplikaci vytrénujete, řídicí panel neobsahuje žádné návrhy na opravy. Vytrénujte aplikaci, abyste viděli tyto návrhy.
Kontrola stavu publikování
Stavová karta Publikování obsahuje informace o posledním publikování aktivní verze.
Zkontrolujte, že aktivní verze je verze, kterou chcete opravit.
Zobrazí se také všechny externí služby, publikované oblasti a agregované přístupy koncových bodů.
Kontrola vyhodnocení trénování
Karta pro vyhodnocení trénování obsahuje agregovaný souhrn celkové přesnosti vaší aplikace podle oblastí. Skóre označuje kvalitu záměru.
Graf označuje správně predikované záměry a problémové oblasti s různými barvami. Při vylepšování aplikace s návrhy se toto skóre zvýší.
Navrhované opravy jsou oddělené podle typu problému a jsou pro vaši aplikaci nejdůležitější. Pokud chcete zkontrolovat a opravit problémy podle záměru, použijte kartu Záměry s chybami v dolní části stránky.
Každá oblast problému má záměry, které je potřeba opravit. Když vyberete název záměru, otevře se stránka Záměr s filtrem použitým u promluv. Tento filtr umožňuje zaměřit se na promluvy, které způsobují problém.
Porovnání změn v různých verzích
Před provedením změn v aplikaci vytvořte novou verzi. V nové verzi proveďte navrhované změny ukázkových promluv záměru a pak znovu trénujte. Na kartě Vyhodnocení trénování na řídicím panelu použijte k porovnání změn změnu z natrénované verze.
Oprava verze přidáním nebo úpravou ukázkových promluv a přetrénováním
Primární metodou opravy aplikace bude přidání nebo úprava ukázkových promluv a opětovné trénování. Nové nebo změněné promluvy musí dodržovat pokyny pro různé promluvy.
Přidání ukázkových promluv by měl provést někdo, kdo:
- má vysoký stupeň porozumění tomu, co promluvy jsou v různých záměrech.
- ví, jak promluvy v jednom záměru mohou být zaměňovány s jiným záměrem.
- dokáže rozhodnout, jestli by měly být dva záměry, které se často vzájemně zaměňují, sbalit do jednoho záměru. V takovém případě je potřeba různá data vytáhnout s entitami.
Vzory a seznamy frází
Na stránce analýzy není uvedeno, kdy použít vzory nebo seznamy frází. Pokud je přidáte, může vám pomoct s nesprávnými nebo nejasnými předpověďmi, ale nepomůže s nevyvážeností dat.
Kontrola nerovnováhy dat
Začněte s tímto problémem – může to být původní příčina ostatních problémů.
Seznam záměrů nevyváženosti dat zobrazuje záměry, které potřebují více promluv, aby bylo možné opravit nerovnováhu dat.
Tento problém vyřešíte takto:
- Přidejte do záměru další promluvy a pak je znovu natrénujte.
Nepřidávejte promluvy do záměru Žádné, pokud není na řídicím panelu navržen.
Tip
Třetí část na stránce– Promluvy podle záměru s nastavením Promluvy (číslo) použijte jako stručnou vizuální příručku, která záměry vyžadují více promluv.
Kontrola nesprávných předpovědí
Seznam nesprávných záměrů predikce zobrazuje záměry s promluvami, které se používají jako příklady pro konkrétní záměr, ale predikují se pro různé záměry.
Tento problém vyřešíte takto:
- Upravte promluvy tak, aby byly konkrétnější pro záměr a znovu se trénují.
- Zkombinujte záměry, pokud jsou promluvy příliš úzce zarovnané a trénují se znovu.
Kontrola nejasných předpovědí
Nejasný seznam záměrů predikce zobrazuje záměry s promluvami s skóre předpovědi, které nejsou dostatečně daleko od nejbližšího soupeře, že hlavní záměr promluvy se může při dalším trénování změnit kvůli negativnímu vzorkování.
Pokud chcete tento problém vyřešit,
- Upravte promluvy tak, aby byly konkrétnější pro záměr a znovu se trénují.
- Zkombinujte záměry, pokud jsou promluvy příliš úzce zarovnané a trénují se znovu.
Promluvy podle záměru
Tato karta zobrazuje celkový stav aplikace napříč záměry. Při opravě záměrů a opětovného natrénování se na tuto kartu můžete podívat na problémy.
Následující graf ukazuje dobře vyváženou aplikaci s téměř žádnými problémy, které je potřeba opravit.
Následující graf ukazuje špatně vyváženou aplikaci s mnoha problémy, které je potřeba opravit.
Najeďte myší na panel jednotlivých záměrů a získejte informace o záměru.
Pomocí funkce Seřadit podle uspořádejte záměry podle typu problému, abyste se mohli zaměřit na nejproblematičtější záměry s tímto problémem.
Záměry s chybami
Tato karta umožňuje zkontrolovat problémy s konkrétním záměrem. Výchozí zobrazení této karty je nejproblematičtější záměry, abyste věděli, kde se zaměřit na vaše úsilí.
Horní prstencový graf zobrazuje problémy se záměrem napříč třemi typy problémů. Pokud existují problémy ve třech typech problémů, každý typ má svůj vlastní graf níže spolu s libovolnými konkurenčními záměry.
Filtrování záměrů podle problému a procenta
Tato část karty umožňuje najít ukázkové promluvy, které spadají mimo prahovou hodnotu chyby. V ideálním případě chcete, aby správné předpovědi byly významné. Toto procento je řízeno obchodními a zákazníky.
Určete procento prahových hodnot, které vám vyhovuje pro vaši firmu.
Filtr umožňuje najít záměry s konkrétním problémem:
| Filtrovat | Navrhované procento | Účel |
|---|---|---|
| Nejproblematičtější záměry | - | Začněte tady – Oprava promluv v tomto záměru zlepší aplikaci více než jiné opravy. |
| Správné předpovědi níže | 60 % | Jedná se o procento promluv ve vybraném záměru, které jsou správné, ale mají skóre spolehlivosti pod prahovou hodnotou. |
| Nejasné předpovědi výše | 15 % | Toto je procento promluv ve vybraném záměru, které jsou zaměňovány s nejbližším soupeřovým záměrem. |
| Nesprávné predikce výše | 15 % | Toto je procento promluv ve vybraném záměru, které jsou nesprávně předpovězeny. |
Správná prahová hodnota předpovědi
Co je vám spolehlivé skóre spolehlivosti predikce? Na začátku vývoje aplikací může být vaším cílem 60 %. Pomocí níže uvedených správných předpovědí s procentem 60 % vyhledejte všechny promluvy ve vybraném záměru, které je potřeba opravit.
Nejasná nebo nesprávná prahová hodnota předpovědi
Tyto dva filtry umožňují najít promluvy ve vybraném záměru nad rámec prahové hodnoty. Tyto dvě procenta si můžete představit jako procenta chyb. Pokud vám vyhovuje 10–15% míra chyb pro předpovědi, nastavte prahovou hodnotu filtru na 15 %, abyste našli všechny promluvy nad touto hodnotou.