에이전트 검토 활동(프리뷰)

에이전트 생성은 반복적인 프로세스입니다. 에이전트의 작동 방식을 이해하고, 변경하고, 결과를 확인하면 더 나은 에이전트를 구축할 수 있습니다. Copilot Studio의 활동 추적은 문제와 개선 기회를 찾을 수 있도록 세션 내에서 에이전트의 입력, 결정 및 출력 순서에 대한 시각적 매핑을 제공합니다.

모든 세션에 대해 활동 맵이 생성되며, 이는 에이전트가 대화를 시작하거나 외부 이벤트에 의해 트리거될 때 시작됩니다.

활동 맵을 보는 것은 프리뷰 기능입니다. 프리뷰 기능은 프로덕션용으로 만들어진 것이 아니므로 기능이 제한될 수 있습니다. 이런 기능은 공식 릴리스 전에 사용할 수 있으므로 고객이 조기에 액세스하고 피드백을 제공할 수 있습니다.

활동 추적에는 두 가지 형태가 있습니다.

• 테스트 중 에이전트 성능의 실시간 활동 맵
• 과거 세션의 활동 맵 및 대화록 기록

참고

이 기능은 생성형 오케스트레이션이 활성화된 에이전트에서만 사용할 수 있습니다.

테스트 중 실시간 활동 맵

테스트 창에서 에이전트에게 질문하면 활동 맵에 생성된 계획이 시각적으로 표시됩니다. 지도는 작업에 대한 누락되거나 잘못된 입력 또는 출력 매개 변수와 같은 오류를 강조 표시합니다. 에이전트가 보내거나 받는 정보가 정확한지 확인할 수도 있습니다.

• 활동 맵을 열려면 테스트 창 상단에 있는 맵 아이콘 을 선택합니다.

• 테스트 창에서 에이전트에게 쿼리를 보낼 때 활동 맵이 자동으로 나타나도록 하려면 아래쪽 화살표를 사용하여 On을 선택합니다.

  

여기에서 사용자는 "현재 기상 조건은 무엇입니까?" 응답하기 위해 선택한 작업과 아직 수집해야 하는 입력, 의사 결정에 대한 에이전트의 주석을 볼 수 있습니다.

이벤트 트리거 테스트

이벤트 트리거를 테스트할 때, 트리거 페이로드가 테스트 채팅에 메시지로 나타납니다. 이 메시지는 테스트 목적으로 Copilot Studio 내에서만 볼 수 있습니다. 에이전트 사용자에게는 표시되지 않습니다. 페이로드 메시지를 사용하여 트리거가 에이전트에 보내는 시기와 정보 및 지침을 이해할 수 있습니다.

토픽 간 추적

활동 맵을 사용하는 경우, 토픽 간 추적하는 옵션을 활동 맵 상단에서 사용할 수 있습니다. 추적이 활성화되면, 토픽이 계획의 일부로 트리거될 때, 해당 토픽 내의 노드들이 실행되면서 활동 맵에 표시되므로, 대화 흐름을 모니터링할 수 있습니다.

활동 기록

Copilot Studio에서 시작된 테스트 세션을 포함하여 에이전트가 세션을 시작할 때마다 해당 활동은 활동 페이지에 실시간으로 기록됩니다. 활동 페이지로 이동하여 세션 중에 에이전트가 내린 상호 작용 및 결정을 검토하고, 에이전트의 행동이 목표와 일치하지 않는 부분을 찾고, 오류 세부 정보를 찾습니다.

참고

Microsoft Exchange 라이선스와 받은 편지함이 있어야 합니다.

활동 페이지로 이동하여 다음을 검토합니다.

• 세션 목록 및 세션 세부 정보
• 세션 내에서 발생한 단계별 활동

중요

활동 페이지는 에이전트 작성자와의 상호 작용 또는 에이전트 작성자의 자격 증명을 사용한 상호 작용을 기록합니다.

세션 목록

세션은 사용자와의 대화, 이벤트 등록 및 응답 또는 이러한 활동의 조합을 포함하는 에이전트 상호 작용의 단위입니다.

세션 목록에서 다음을 확인할 수 있습니다.

• 사용자: 에이전트와 상호 작용하는 사용자의 이름입니다. 세션에 사용자가 관여하지 않는 경우(예: 에이전트가 인간의 지시 없이 작업을 수행하는 경우) 사용자는 자동화된 트리거로 표시됩니다.
• 일시: 세션의 첫 번째 상호 작용이 시작된 시간입니다.
• 요약: 상호 작용 중에 발생한 일에 대한 AI 생성 요약입니다. 세션을 빠르게 이해하기 위해 요약을 사용할 수 있습니다.
• 상태: 세션의 상태입니다.
• 채널: 상호 작용이 발생한 채널입니다. 에이전트 테스트 창에서 발생한 세션에는 Copilot Studio 아이콘이 있습니다.

세션 활동 보기

활동 탭에서는 세션 내의 활동을 시각적 활동 맵 또는 대화록으로 볼 수 있습니다. 활동 맵 또는 대화록을 선택하여 이러한 보기 사이를 전환합니다.

세션의 활동을 보려면 세션을 선택합니다. 세션 목록으로 돌아가려면 뒤로 아이콘 을 선택하세요.

활동 맵에서 모든 에이전트 활동 보기

활동 맵은 세션 중에 발생한 입력, 결정 및 반응의 흐름을 시각적으로 표현한 것입니다.

자세한 내용을 보려면 활동을 확장합니다. 활동에 따라 상호 작용의 해당 지점에 대한 다양한 입력(이벤트) 및 출력(반응)을 볼 수 있습니다.

이 할 일 추가 작업의 활동 세부 정보에서는 필수 입력 값이 누락되었음을 확인할 수 있습니다. 문제를 해결하기 위해 이벤트 트리거, 지식 소스, 지침 또는 작업 자체를 수정한 다음 에이전트를 다시 테스트할 수 있습니다.

활동 맵을 보는 동안 검토 패널을 열어 에이전트의 활동을 이해하고 개선하기 위한 AI 기반 인사이트를 얻을 수 있습니다. 검토 패널은 에이전트가 특정 작업을 시작한 이유를 설명하고 실패한 작업에 대한 오류 세부 정보를 제공합니다. 이 정보를 사용하여 에이전트가 지침을 올바르고 성공적으로 수행하고 있는지 확인할 수 있습니다.

편집을 선택하여 선택한 활동과 관련된 토픽 또는 작업을 보고 변경합니다.

대화 내용을 대화록으로 보기

대화록 보기에는 세션 중에 에이전트와 진행된 대화가 표시됩니다. 트랜스크립트는 사용자 입력, 트리거 페이로드 및 에이전트 응답을 기록합니다.

대화록을 사용하여 에이전트가 사용자와의 대화에 어떻게 응답하는지 확인할 수 있습니다. 에이전트가 이벤트 트리거에서 수신하는 트리거 페이로드 메시지도 볼 수 있습니다.