에이전트의 효율성을 검토하고 개선하세요 Copilot Studio

Copilot Studio 업그레이드된 분석 페이지는 에이전트의 전반적인 효과에 대한 집계된 통찰력을 제공합니다.

:::

팁

기본적으로 분석 탭은 기존 분석 환경의 요약 페이지로 열립니다.
페이지 상단의 새로운 분석 스위치를 사용하여 업그레이드된 환경을 켜거나 끕니다.

에이전트 효과를 검토하고 개선할 때 집중해야 할 핵심 영역은 세 가지입니다.

결과 및 참여: 대화의 최종 결과를 알면 에이전트가 어디에서 성공하고 있는지, 어디를 개선해야 하는지 파악하는 데 도움이 됩니다.
지식 소스 사용: 지식 소스가 얼마나 자주 사용되는지 확인하면 에이전트가 사용자 질문에 얼마나 잘 답변할 수 있는지 이해하는 데 도움이 됩니다.
사용자 피드백: 사용자 피드백을 검토하면 새로운 사용자 시나리오와 문제점을 파악하고 사용자의 요구 사항을 직접 기반으로 개선할 수 있습니다.

팁

기본적으로 이 페이지에는 지난 7일 동안의 주요 성과 지표가 표시됩니다. 기간을 변경하려면 페이지 상단의 date 컨트롤을 사용하십시오.

결과 및 참여

결과 및 참여 섹션에서는 에이전트와 사용자 간의 각 세션 결과 유형을 추적하는 차트를 보여줍니다.

세션 결과에 대한 원형 차트 분석과 각 결과로 이어진 사용자 지정 주제 가 있는 사이드 패널을 열려면 차트에서 세부 정보 보기 를 선택합니다.

세션은 다음 두 가지 상태 중 하나에 해당합니다.

참여하지 않음: 사용자가 에이전트와 상호작용하거나 에이전트가 사용자에게 적극적인 메시지를 보낼 때 세션이 시작됩니다. 세션은 미참여 상태에서 시작됩니다.
참여: 다음 중 하나가 발생하면 세션이 참여 상태가 됩니다.
- 비시스템 토픽이 트리거되었습니다.
- 세션이 에스컬레이션되었습니다.
- 대체 토픽이 트리거됩니다.
- 대화 부스팅 토픽이 트리거됩니다.

세션이 참여하면 참여 상태가 유지됩니다. 참여 세션은 다음 결과 중 하나를 가질 수 있습니다.

확대됨: 세션이 종료되고 토픽가 트리거되거나 토픽가 실행되면(대화가 라이브 에이전트로 전송되는지 여부와 관계없이 현재 분석 세션이 종료됨) 확대된 것으로 간주됩니다.
해결됨: 세션은 다음 중 하나에 해당할 때 종료되고 해결된 것으로 간주됩니다.
- 확인된 성공 토픽이 트리거됩니다.
- 대화 종료 토픽이 트리거되고 사용자는 상호 작용이 성공했는지 확인하거나 세션 시간이 초과되도록 합니다.
중단됨: 세션이 종료되고 참여 세션의 시간이 초과되고 해결 또는 확대 상태에 도달하지 못하면 세션이 종료된 것으로 간주됩니다. 중단됨 으로 간주됩니다.

참여도를 측정하고 개선하는 방법에 대한 제안과 모범 사례를 보려면 지침 문서 Copilot 참여 측정 을 참조하세요.

지식 소스 사용 섹션에서는 에이전트와 사용자 간 대화에서 지식 소스가 얼마나 자주 사용되는지 추적하는 차트와 지표를 보여줍니다.

또한 소스가 얼마나 자주 사용되는지, 얼마나 많은 오류가 생성되는지, 사용자 질문에 답변을 제공하는 데 소스가 얼마나 자주 사용되는지에 대한 추세 지표도 보여줍니다.

차트는 분석 페이지 상단에 정의된 기간 동안 사용된 상위 5개 지식 소스를 표시합니다.

지정된 기간 동안 사용된 모든 지식 소스와 추세 지표 목록이 있는 사이드 패널을 열려면 차트에서 세부 정보 보기 를 선택합니다.

사용자 피드백 섹션에서는 고객이 세션 종료 시 설문조사 요청에 응답한 세션의 평균 고객 만족도(CSAT) 점수를 추적하는 차트와 측정 항목을 보여줍니다.