Поделиться через

Измерение результатов агента

  • Статья

Отслеживание вовлеченности и результатов разговоров имеет решающее значение для измерения показателей эффективности агента и выявления областей для улучшения на панели мониторинга аналитики.

Внимание!

Разговор Copilot Studio между пользователем и агентом генерирует один или несколько сеансов аналитики. Все сеансы аналитики являются либо с взаимодействием, либо без взаимодействия.

Понимание результатов сеансов аналитики

Каждый сеанс аналитики имеет результат:

  • Сеансы без взаимодействия всегда имеют результат Нет.

  • Сеансы со взаимодействием имеют один из следующих результатов:

    • Разрешено
    • Эскалировано
    • Прервано

Взаимодействие и результаты

Сеансы анализа разговоров, их состояние взаимодействия и их результаты доступны как часть панели мониторинга аналитики или в таблице ConversationTranscript в Dataverse.

Взаимодействие Результат Определение
Без взаимодействия Нет (None) Все сеансы без взаимодействия всегда имеют результат Нет.
С взаимодействием Эскалировано (HandOff) Сеанс считается эскалированным, когда запускается тема Эскалация или достигается узел Передать разговор.
С взаимодействием Разрешено (Resolved) Сеанс считается разрешенным, когда срабатывает тема Конец разговора и пользователь подтверждает, что взаимодействие было успешным (impliedSuccess = FALSE) или не отвечает и позволяет сеансу истечь по времени (impliedSuccess = TRUE).
С взаимодействием Прервано (Abandoned) Сеанс считается прерванным по завершении сеанса взаимодействия, когда он не достиг состояния разрешения или эскалации.

Правильное завершение разговоров для оценки результатов

Важно закончить разговор темой Конец разговора, чтобы пользователь мог подтвердить, что его проблема была решена или нет (и, возможно, эскалировать ее).

Когда агент подтверждает успешное выполнение, пользователю отображается опрос CSAT для получения оценки от 0 до 5.

Если вы уверены в результате разговора на основе логики темы, вы можете напрямую пометить ее как подтвержденный успех или перенаправить на тему эскалации.

Совет

На едином холсте разработки в редакторе кода вы можете установить conversationOutcome внутри действия. Например, conversationOutcome: ResolvedConfirmed для подтвержденного успеха или conversationOutcome: ResolvedImplied для неявно предполагаемого успеха.