Para criar ou adicionar a um conjunto de testes NLU, você pode carregar um arquivo de enunciados de teste correspondentes às intenções corretas. Use o conjunto de testes para avaliar o desempenho do seu modelo.
Antes de Iniciar
Certifique-se de que o plug-in Workbench de NLU - Core, o plug-in Workbench de NLU, o plug-in Workbench de NLU - Recursos avançados e o plug-in Inteligência preditiva estejam todos instalados e ativados
Você pode usar conjuntos de testes com modelos NLU para Virtual Agent e Pesquisa com IA.
Função necessária: nlu_editor, nlu_admin ou admin. O editor deve ser atribuído ao modelo.
Por Que e Quando Desempenhar Esta Tarefa
Seu arquivo CSV ou XLSX (Livro do Excel) deve conter uma tabela que emparelha seus enunciados de teste com as intenções que você espera para eles. Seu arquivo pode conter até 10.000 enunciados. Certifique-se de que o arquivo tenha colunas intituladas "Enunciado" e "Intenção esperada".
Nota:
Para conjuntos de testes em idiomas diferentes do inglês, você deve adicionar a propriedade do sistema glide.import.csv.charset com o valor UTF-8. Consulte Propriedades dos conjuntos para importação.
Para obter resultados de testes mais precisos, inclua enunciados que o modelo provavelmente encontrará dos usuários. Verifique se você tem enunciados de teste que cobrem todas as intenções no seu modelo.
Procure incluir cerca de 10% dos enunciados de teste sem intenções esperadas. A inclusão de enunciados sem intenção esperada ajuda a avaliar a capacidade do seu modelo de detectar enunciados irrelevantes que não devem ter nenhuma intenção prevista.
Nota:
Para indicar que um enunciado de teste no arquivo não tem intenção esperada, o valor de "Intenção esperada" deve estar vazio.
Tabela 1. Exemplo de tabela de conjunto de testes
Enunciado
Intenção esperada
Deixe-me experimentar um hambúrguer
Ordem
Quero pagar
Valor de pagamento
Traga-me algo legal
Ordem
O restaurante está aberto?
Algo errado com meu pagamento
Pedido, pagamento
Custo total
Valor de pagamento
Procedimento
Navegar até Tudo > Workbench de NLU > Recursos avançados de NLU > Teste em lote para vários modelos.
Clique em Conjuntos de testes
Clique em Criar conjunto de testes.
Escolha um nome para o conjunto de testes.
Escolha um idioma.
Clique em Selecionar arquivo e escolha um arquivo CSV ou XLSX (Livro do Excel).
Depois de criar um conjunto de testes, você pode adicionar mais enunciados a ele. Ao exibir um conjunto de testes, clique em Importar enunciados.Figura 1. Página de conjunto de testes com botão para importar enunciados
Selecione um arquivo CSV ou XLSX (livro do Excel) com seus enunciados adicionais para importar. Figura 2. Janela Importar enunciados
Clique em Importar. O sistema adiciona seus enunciados ao conjunto de testes. Após a importação, execute novamente todos os testes que usam o conjunto de testes.
