내 모델 테스트
기본 테스트 세트에 대해 (NLU) 모델을 테스트합니다 자연어 이해 . 테스트는 현재 콘텐츠로 모델이 수행되는 방식을 결정하는 데 도움이 됩니다.
시작하기 전에
- NLU Model Builder - Core 플러그인, NLU Model Builder 플러그인, NLU 워크벤치 - Advanced Features 플러그인 및 예측 인텔리전스 플러그인이 모두 설치되고 활성화되어 있는지 확인합니다.
- 또는 AI 검색에 대해 가상 에이전트 교육된 모델이 있어야 합니다. 자세한 내용은 모델 빌드 및 교육 문서를 참조하십시오.
- 모델 테스트를 위한 테스트 세트가 있습니다. 자세한 내용은 테스트 세트 생성 및 관리 문서를 참조하십시오.
- 필요한 역할: nlu_editor, nlu_admin 또는 admin 모델에 편집기를 할당해야 합니다.
이 태스크 정보
테스트 발언과 예상 의도를 포함하는 기본 테스트 세트를 사용하여 모델 테스트를 실행합니다.
- 테스트 세트의 예상 의도가 모델의 의도와 일치하지 않으면 해당 의도가 있는 발언은 테스트에 사용되지 않습니다. 테스트 결과에는 포함되지 않습니다.
- Dialog Acts의 대화 중간 응답은 에서 시도하거나 테스트 NLU 워크벤치할 수 없습니다.
- 모델이 관련 없음으로 표시된 발언에 대한 예측을 반환하지 않으면 해당 결과는 올바른 것으로 계산됩니다.
- 테스트 세트가 모델의 의도 중 60% 이상을 다루지 않는 경우 시스템은 신뢰도 임계치를 권장하지 않습니다. 그러나 여전히 테스트를 실행할 수 있습니다.
이 예제 시나리오에서는 모델을 학습시켰고 성능을 평가하려고 합니다.
프로시저
-
새 테스트 실행을 선택합니다.
주:테스트 중에 다른 단계를 사용할 수 없습니다.
-
새 테스트 실행 확인 대화 상자가 열리므로 확인을 선택합니다.
테스트가 시작되고 테스트 진행 중... 페이지가 로드됩니다.
결과
테스트가 완료되면 모델 테스트 및 게시 페이지가 다시 로드됩니다. 테스트 실행 날짜 필드는 이 테스트의 날짜와 시간을 반영합니다.
개요 탭에는 테스트 결과 차트가 표시됩니다. 또한 상위 5개의 잘못된 의도와 상위 5개의 누락된 의도 목록도 표시합니다.
자세한 결과 탭에는 모든 테스트 발언과 예측 결과가 나열됩니다.
모델 테스트 및 게시에서 테스트 기록 보기를 클릭하거나 다음으로 이동하여 이전 테스트 결과를 볼 수 있습니다. 레이블이 표시됩니다.
다음에 수행할 작업
결과를 사용하여 모델의 컨텐츠를 편집하고 개선합니다. 결과가 만족스러우면 모델을 게시하여 다음과 같은 가상 에이전트소비 애플리케이션에서 사용할 수 있도록 합니다.