에이전트 결과 측정
대화 참여 및 결과를 추적하는 것은 에이전트 성과 메트릭을 측정하고 분석 대시보드에서 개선이 필요한 영역을 찾는 데 중요합니다.
중요
사용자와 에이전트 간의 대화는 Copilot Studio 하나 이상의 분석 세션을 생성합니다. 모든 분석 세션은 참여 또는 미참여 상태입니다.
분석 세션 결과 해석
각 분석 세션에는 다음과 같은 결과가 있습니다.
미참여 세션의 결과는 항상 없음입니다.
참여 세션의 결과는 다음 중 하나입니다.
- 해결됨
- 악화됨
- 중단됨
참여 및 결과
대화 분석 세션, 참여 상태 및 결과는 분석 대시보드 또는 Dataverse의 ConversationTranscript
테이블의 일부로 사용할 수 있습니다.
참여 | 결과 | 정의 |
---|---|---|
참여 안 함 | None (None ) |
참여하지 않은 모든 세션의 결과는 없음입니다. |
참여함 | 에스컬레이션됨 (HandOff ) |
에스컬레이션 토픽이 트리거되거나 대화 전송 노드에 도달하면 세션이 에스컬레이션됨으로 간주됩니다. |
참여함 | 확인됨 (Resolved ) |
대화 종료 토픽이 트리거되고 사용자가 상호 작용이 성공했음을 확인하거나(impliedSuccess = FALSE ) 응답하지 않고 세션이 시간 초과되도록 할 때(impliedSuccess = TRUE ) 세션은 해결됨으로 간주됩니다. |
참여함 | 중단됨 (Abandoned ) |
참여한 세션이 종료되고 해결됨 또는 에스컬레이션됨 상태에 도달하지 않은 경우 세션은 중단됨으로 간주됩니다. |
결과를 측정하기 위해 적절하게 대화를 종료
사용자가 문제가 해결되었는지 여부를 확인할 수 있도록(그리고 잠재적으로 에스컬레이션할 수 있도록) 대화 종료 주제로 대화를 종료하는 것이 중요합니다.
에이전트가 성공을 확인하면 사용자에게 CSAT 설문 조사가 표시되어 0~5점을 획득합니다.
토픽 로직을 기반으로 한 대화의 결과가 확실하다면 확인된 성공으로 직접 플래그를 지정하거나 에스컬레이션 토픽으로 리디렉션할 수 있습니다.
팁
통합 제작 캔버스의 코드 편집기에서 작업 내에서 conversationOutcome
을 설정할 수 있습니다. 예를 들어, 확인된 성공의 경우 conversationOutcome: ResolvedConfirmed
, 묵시적인 성공의 경우 conversationOutcome: ResolvedImplied
입니다.