M3. 운영 — 만든 에이전트를 검증하고, 내보내고, 관찰한다
한 줄 요약 — 빌드가 끝이 아닙니다. 테스트 → 게시·채널 연결 → 보안·인증 → 분석 → 용량 관리 → 문제 해결의 운영 사이클을 공식 문서 기준으로 익힙니다. 게시해야 채널에 반영되고, 게시 후에도 분석으로 개선을 반복합니다.
M3은 공식 문서의 운영 구간을 6개 하위 세션으로 나눠 진행합니다.
하위 세션
| # | 세션 | 핵심 |
|---|---|---|
| 1 | 테스트 | 테스트 채팅·추적 도구 · 에이전트 평가(Evaluation) · 데모 웹사이트 |
| 2 | 게시·채널 | Publish · 데모/라이브 웹사이트 · Teams+M365 Copilot · 관리자의 채널 통제 |
| 3 | 보안·인증 | No auth / Microsoft / 수동 · Entra Agent ID · 거버넌스 |
| 4 | 분석 | Summary·Overview·Savings / Custom metrics / Effectiveness / Use |
| 5 | 라이선스·용량 | Copilot Credits(공통 통화) · 조달 방식 · 요율·용량 계산 · 시행 |
| 6 | 문제 해결 | Agent status · 소스 한도 · 오류 코드 · 플로우 체커 |
1. 테스트
Test your agent 패널로 빌드 중 대화 흐름·오류를 확인합니다 — 토픽 추적으로 어떤 노드를 지나는지 보고, 변수 패널로 값 변화를 관찰합니다. 반복 가능한 대량 검증은 별도의 Evaluation(에이전트 평가) 로 돌립니다.
👉 상세 — 테스트
2. 게시·채널
Publish로 모든 연결 채널에 반영합니다. 데모 웹사이트로 이해관계자 검증 → Teams+M365 Copilot·웹사이트·모바일 등 채널 확장 순서를 다룹니다.
3. 보안·인증
Authenticate with Microsoft(기본) / No authentication / Authenticate manually 3옵션과 사용자 변수, Microsoft Entra Agent ID, 조직 거버넌스 설정을 다룹니다.
4. 분석
Analytics의 4개 섹션(요약·커스텀 지표·Effectiveness·Use)에서 대화 결과·답변 품질을 보고, 실제 사용자 발화로 트리거 구문과 지식을 보강하는 개선 사이클을 돌립니다.
👉 상세 — 분석
5. 라이선스·용량
Standard Harness도 2025년 9월 1일부로 통화가 Copilot Credits입니다. 두 Harness의 차이는 통화가 아니라 조달 방식이며, 요율·플로우 실행 과금 계산과 용량 소진 시 시행 방식을 다룹니다.
6. 문제 해결
Agent status(게시 차단·경고·정보), 게시 실패(지식 소스 한도), 오류 코드, 플로우 체커, 도구 인증 문제 등 자주 만나는 문제의 진단·해결 순서를 정리합니다.
핵심 정리
- 게시해야 반영 — 수정 후 재게시를 잊으면 사용자는 옛 버전과 대화합니다
- 데모 웹사이트는 검증용, 라이브 채널은 운영용 — URL을 고객과 공유하지 마세요
- 게시가 끝이 아니라 분석 → 개선 → 재게시 사이클의 시작입니다
이전 ← M2. 빌드 · 다음 → M4. 실습 Lab
출처: Key concepts - Publish and deploy your agent (MS Learn) · Configure user authentication (MS Learn) · Analytics overview (MS Learn) · Licensing for agents powered by the standard harness (MS Learn)