Para criar ou adicionar a um conjunto de testes NLU, você pode carregar um arquivo de enunciados de teste correspondentes às intenções corretas. Use o conjunto de testes para avaliar o desempenho do seu modelo.
Antes de Iniciar
Certifique-se de que o plug-in Workbench de NLU - Core, o plug-in Workbench de NLU, o plug-in Workbench de NLU - Recursos avançados e o plug-in Inteligência preditiva estejam todos instalados e ativados
Você pode usar conjuntos de testes com modelos [ NLU para Virtual Agent e AI Search.
Função necessária: nlu_editor, nlu_admin ou admin. O editor deve ser atribuído ao modelo.
Por Que e Quando Desempenhar Esta Tarefa
Seu arquivo CSV ou XLSX (Pasta de trabalho do Excel) deve conter uma tabela que emparelha seus enunciados de teste com as intenções que você espera deles. Seu arquivo pode conter até 10.000 enunciados. Verifique se o arquivo tem colunas intituladas "Enunciado" e "Intenção esperada".
Nota:
Para conjuntos de testes em idiomas diferentes do inglês, você deve adicionar a propriedade do sistema glide.import.csv.charset com o valor UTF-8. Consulte Propriedades dos conjuntos de importação.
Para obter resultados de testes mais precisos, inclua enunciados que o modelo provavelmente encontrará dos usuários. Certifique-se de ter enunciados de teste que cubram todas as intenções do seu modelo.
Procure incluir cerca de 10% dos enunciados de teste sem intenções esperadas. A inclusão de enunciados sem intenção esperada ajuda a avaliar a capacidade do seu modelo de detectar enunciados irrelevantes que não devem ter nenhuma intenção prevista.
Nota:
Para indicar que um enunciado de teste em seu arquivo não tem intenção esperada, o valor de "Intenção esperada" deve estar vazio.
Tabela 1. Exemplo de tabela de conjunto de testes
Enunciado
Intenção esperada
Deixe-me pedir um hambúrguer
Ordem
Quero pagar
Valor de pagamento
Traga-me algo legal
Ordem
O restaurante está aberto?
Algo errado com meu pagamento
Pedido, pagamento
Custo total
Valor de pagamento
Procedimento
Navegar até Todos > NLU Workbench > Recursos avançados de NLU > Teste em lote para vários modelos.
Clique em Conjuntos de testes
Clique em Criar conjunto de testes.
Escolha um nome para o conjunto de testes.
Escolha um idioma.
Clique em Selecionar arquivo e escolha um arquivo CSV ou XLSX (Pasta de trabalho do Excel).
Depois de criar um conjunto de testes, você pode adicionar mais enunciados a ele. Ao exibir um conjunto de testes, clique em Importar enunciados.Figura 1. Página de conjunto de testes com botão de importação de enunciados
Selecione um arquivo CSV ou XLSX (Pasta de trabalho do Excel) com seus enunciados adicionais para importar. Figura 2. Janela de importação de enunciados
Clique em Importar. O sistema adiciona seus enunciados ao conjunto de testes. Após a importação, execute novamente todos os testes que usam o conjunto de testes.
