Mierzenie wyników pomocnika
Śledzenie zaangażowania i wyników interakcji z rozmowami jest bardzo istotne dla oceny metryk wydajności pomocnika i identyfikowania obszarów do poprawy.
Ważne
Rozmowa Copilot Studio między użytkownikiem a pomocnikiem generuje jedną lub wiele sesji analitycznych. Wszystkie sesji analizy są albo angażowane, albo niezaangażowane.
Interpretacja wyników sesji analitycznych
Wyniki każdej z sesji analitycznych:
Niezaangażowane sesje zawsze mają wynik Brak.
Zaangażowane sesje mają jedne z następujących wyników:
- Rozwiązane,
- Eskalowane,
- Porzucone.
Zaangażowanie i wyniki
Sesji analizy konwersacji, ich stanu zobowiązania i wyniki są dostępne jako część pulpitu nawigacyjnego analizy lub w tabeli ConversationTranscript w Dataverse.
| Zaangażowanie | Wynik | Definicja |
|---|---|---|
| Bez interakcji | Brak (None) |
Wszystkie niezaangażowane sesje zawsze mają wynik Brak. |
| Z Interakcją | Eskalowano (HandOff) |
Sesja jest uważana za eskalowaną, gdy po eskalacji temat jest wyzwalany lub zostanie osiągnięty węzeł Przekazanie konwersacji. |
| Z Interakcją | Rozwiązano (Resolved) |
Sesja jest uważana za rozwiązaną, gdy temat Koniec konwersacji jest wywołany i użytkownik potwierdza, że interakcja zakończyła się powodzeniem (impliedSuccess = FALSE) lub nie ma odpowiedzi i pozwala na wygaśnięcie sesji (impliedSuccess = TRUE). |
| Z Interakcją | Porzucone (Abandoned) |
Sesja jest uważana za porzuconą w momencie końca zaangażowanej sesji, która nie została rozwiązana ani eskalowana. |
Poprawnie kończące się konwersacje w celu oceny wyników
Ważne jest, aby zakończyć konwersację tematem Koniec konwersacji, by użytkownik końcowy mógł potwierdzić, czy problem jest rozwiązany (i potencjalnie eskalować).
Gdy pomocnik potwierdzi powodzenie, dla użytkownika końcowego jest wyświetlana ankieta CSAT w celu zdobytego wyniku 0–5.
Jeśli masz pewność, że konwersacja jest oparta na logice tematu, możesz ją bezpośrednio przekierowywać jako potwierdzenie sukcesu lub skierować do eskalowania tematu.
Napiwek
Na ujednoliconej kanwie tworzenia można ustawić conversationOutcome w akcji. Na przykład conversationOutcome: ResolvedConfirmed dla potwierdzonego powodzenia lub conversationOutcome: ResolvedImplied dla sugerowanego powodzenia.