Kontrola a zlepšení efektivity agentů v nástroji Copilot Studio

Stránka Analýza v nástroji Copilot Studio poskytuje agregovaný přehled o celkové efektivitě agenta napříč analytickými relacemi.

Existují tři základní oblasti, na které je třeba se zaměřit při kontrole a zlepšování účinnosti agentů:

• Výsledky a angažovanost: Znalost konečného výsledku konverzace vám pomůže zjistit, kde je váš agent úspěšný a kde je třeba jej zlepšit.
• Použití zdroje znalostí: Informace, jak často jsou používány vaše zdroje znalostí, vám pomůže zjistit, jak dobře je váš agent schopen poskytovat odpovědi na otázky uživatelů.
• Použití akcí: Informace, jak často jsou používány akce a jak často jsou úspěšné, vám pomůže zjistit, zda jsou tyto akce pro užitečné a úspěšné v souvislosti s uživateli.
• Názory uživatelů: Kontrola názorů uživatelů vám pomůže rozpoznat nové uživatelské scénáře a problémy a provádět vylepšení přímo na základě požadavků uživatelů.

Můžete zobrazit analýzy událostí, ke kterým došlo za posledních 360 dní.

Poznámka:

20. února 2025 se uchovávání dat pro analýzu změnilo z 90 dnů na 360 dní, takže můžete zobrazit pouze analýzy z událostí, ke kterým došlo po 22. listopadu 2024, a to i v případě, že k nim došlo během posledních 360 dnů.

Výsledky a zapojení

V části Výsledky a zapojení je zobrazen graf, který sleduje typ výsledku pro každou relaci mezi vaším agentem a uživateli.

Chcete-li otevřít postranní panel s rozpisem výsečového grafu výsledků relací spolu s hlavními tématy, která vedla k jednotlivým výsledkům, v grafu vyberte Zobrazit podrobnosti.

Relace spadá do jednoho z následujících dvou stavů:

• Nezapojená: Relace se spustí, když uživatel komunikuje s vaším agentem nebo když agent odešle uživateli proaktivní zprávu. Relace začíná v nezapojeném stavu.
• Zapojená: Relace se stane zapojenou, když nastane jedna z následujících situací:
  • je aktivováno nesystémové téma,
  • relace je eskalována,
  • je aktivováno záložní téma,
  • je aktivováno konverzační posílení tématu.

Jakmile je relace zapojena, zůstává zapojená. Angažovaná relace má jeden z následujících výsledků:

• Eskalovaná: Relace skončí a je považována za eskalovanou, když je aktivováno téma Eskalovat nebo je spuštěn uzel Předat agentovi (aktuální analytická relace skončí bez ohledu na to, jestli je konverzace předána či nepředána živému agentovi).
• Vyřešeno: Relace skončí a je považována za vyřešenou, když je aktivováno téma Konec konverzace a uživatel potvrdí, že interakce proběhla úspěšně, nebo nechá vypršet časový limit relace.
• Opuštěna: Relace skončí a je považována za opuštěnou, pokud po 36 minutách vyprší časový limit zadané relace, která nedosáhla vyřešeného nebo eskalovaného stavu.

Můžete také nastavit výsledek akcí s parametrem conversationOutcome pomocí editoru kódu akcí. Například conversationOutcome: ResolvedConfirmed pro potvrzený úspěch nebo conversationOutcome: ResolvedImplied pro předpokládaný úspěch.

Návrhy a osvědčené postupy, jak měřit a zlepšovat zapojení, najdete v dokumentaci s pokyny Měření zapojení kopilota.

Použití zdroje znalostí

Část Použití zdroje znalostí obsahuje graf a metriky, které sledují, jak často jsou vaše zdroje znalostí používány v konverzacích mezi vaším agentem a uživateli.

Zobrazuje také indikátory trendů toho, jak často se vaše zdroje používají, kolik chyb se generuje a kolikrát se zdroj používá k poskytování odpovědí na otázky uživatelů.

Graf obsahuje pět nejčastěji používaných zdrojů znalostí v časovém období definovaném v horní části stránky Analýza.

Výběrem možnosti Zobrazit podrobnosti otevřete postranní panel obsahující využití zdroje znalostí a chybovost ve vybraném časovém období. Pomocí těchto grafů můžete určit, které zdroje znalostí fungují dobře, aby pomohly uživatelům, a na které se zaměřit pro zlepšení.

• Použití zdroje znalostí ukazuje procento relací, které používaly každý zdroj znalostí, ke kterému má agent přístup.
• Chyby ukazují procento relací, které vedly k chybě a které používaly jednotlivé typy zdrojů znalostí (například SharePoint).

Využití akce

Část Použití akcí obsahuje graf a metriky, které sledují, jak často jsou spouštěny vaše akce v průběhu času a jak často jsou tyto akce úspěšně dokončeny.

Zobrazuje také indikátory trendů toho, jak často se vaše akce používají, a procento volaných akcí, které byly úspěšně dokončeny.

Poznámka:

Analýza akcí je k dispozici pro agenty se zapnutým generativním režimem.

Graf obsahuje pět nejčastěji používaných akcí v časovém období definovaném v horní části stránky Analýza.

Chcete-li otevřít postranní panel se seznamem všech akcí použitých v zadaném časovém období spolu s indikátory trendu, v grafu vyberte Zobrazit podrobnosti.

Názory uživatelů

Sekce Názory uživatelů obsahuje graf a metriky, které sledují průměrné skóre spokojenosti zákazníků (CSAT) pro relace, ve kterých zákazníci reagují na žádost o provedení průzkumu na konci relace.