테스트 에이전트 실행

의 AI 에이전트 스튜디오 테스트 플레이그라운드를 사용하여 샘플 발언을 사용하여 에이전트에 대해 수동 테스트 실행을 실행합니다. 에이전트가 의도한 작업을 완료하고, 올바른 도구를 사용하고, 에지 케이스 및 실패 시나리오를 적절하게 처리하는지 확인합니다.

• AI 에이전트 실행을 테스트하려면 다음 문서를 참조하십시오 Manually test the execution of an AI agent.
• 에이전틱 워크플로우 실행을 테스트하려면 다음 문서를 참조하십시오 Manually test the execution of an agentic workflow.

접근 제어 테스트

서로 다른 사용자로 액세스 테스트를 실행하여 ACL 구성이 올바르게 작동하는지 확인합니다. 접근 권한이 있어야 하는 사용자는 에이전트를 호출할 수 있고 접근 권한이 없어야 하는 사용자는 에이전트를 호출할 수 없는지 확인합니다.

• AI 에이전트에 대한 사용자 액세스를 테스트하려면 다음 문서를 참조하십시오 Test user access to an AI agent.
• 에이전틱 워크플로우에 대한 사용자 액세스를 테스트하려면 다음 문서를 참조하십시오 Test user access to an agentic workflow.

액세스 테스트 결과가 예기치 않은 경우 ACL 구성을 검토합니다. ACL이 에이전트, 워크플로우 및 도구 레이어에서 상호 작용하는 방식에 대한 자세한 내용은 다음을 참조하십시오 Implement access control in Now Assist AI agents .

자동화된 평가 실행

자동화된 평가는 예상 입력 및 출력 데이터 세트에 대해 에이전트를 테스트하여 일관되고 반복 가능한 품질 측정을 제공합니다. 수동 테스트가 완료된 후 평가를 실행하여 가동 전에 성능 기준선을 설정합니다. 이 프로세스에 대한 자세한 내용은 다음 문서를 참조하십시오 Execute an agentic evaluation run.

테스트에서 보호자 로그 검토

가동 중으로 전환하기 전에 테스트 실행에서 로그를 익스포트하고 검토 Now Assist 가디언 합니다. 로그에는 테스트 중에 Guardian이 검색한 콘텐츠가 표시되며, 이는 현재 차단 구성이 프로덕션 사용에 적합한지 여부를 결정하는 데 도움이 됩니다. 문서를 참조하십시오.

로그에 예기치 않은 탐지가 표시되면 계속하기 전에 Guardian 구성을 조정하십시오. 일반적인 원인으로는 지나치게 광범위하고 민감한 주제 필터나 불쾌한 콘텐츠 탐지를 유발하는 테스트 발언이 있습니다.

운영개시(Go-Live) 확인 게이트

다음 사항이 모두 true가 될 때까지 진행하지 마십시오.라이브 전환 및 모니터링

• 정의된 사용 사례 시나리오에 대해 에이전트 실행 테스트를 통과합니다.
• 접근 제어 테스트에서는 의도된 사용자만 에이전트를 호출할 수 있는지 확인합니다.
• 자동화된 평가가 정의된 성공 기준 임계치를 충족합니다.
• 테스트의 보호자 로그를 검토했으며 구성이 프로덕션에 적합하다고 확인되었습니다.

다음 단계

모든 유효성 확인 게이트 기준이 충족되면 다음으로 라이브 전환 및 모니터링진행합니다.