NLU モデル設定
モデルの概要の [設定] ページで、NLUモデルの名前、説明、または信頼度しきい値を変更します。
モデルの設定にアクセスするには、次の場所に移動します . モデルのアプリケーションのタブを選択し、次にモデルの名前を選択します。モデルの概要で、[ モデル設定 ] タブを選択します。
モデル設定
モデル設定ページの上部セクションでは、モデルの名前、簡単な説明、およびビジネスエリアを変更できます。モデルの言語、目的、スコープは変更できません。別の言語、目的、またはスコープでモデルを作成するには、「 モデルの作成」を参照してください。
デフォルトでは、[ 句読点を無視 ] チェックボックスがアクティブになっています。句読点を無視すると、句読点がわずかに異なる発言の予測インテントと信頼スコアの差異が少なくなります。最良の結果を得るには、チェックボックスをアクティブのままにします。
モデルのしきい値設定
ここでは、モデルでの信頼度しきい値の仕組みを調整できます。
しきい値は、パーセンテージで表される信頼スコアです。モデルの信頼度しきい値によって、特定の発言に対してそのモデルからどのようなインテントが予測されるかが決まります。たとえば、モデルしきい値が 65% の場合、インテントの信頼スコアが 65% 以上の場合にのみ、発言のインテントが予測されます。しきい値の設定が低すぎると、発言と一致しないはずのインテントが予測されるため、誤検出が増加する可能性があります。一方、モデルしきい値が高すぎると、予測するインテントが除外される可能性があります。理想的なしきい値を見つけることで、インテントを正しく予測するモデルの能力が向上します。
- 自動: モデルに最適な信頼度しきい値を選択できます。値はテスト結果に基づいて動的に更新されます。これは、モデルのデフォルトのテストセットが使用される「 モデルをテストして公開する 」フェーズで行われます。
- 手動: 信頼性しきい値を手動で設定できます。テスト中にモデルにより適したしきい値を推奨することもできます。推奨事項を受け入れることを選択できます。
ビルド済みモデルには、調整されたしきい値が付属しています。構築済みモデルの信頼度しきい値は、そのモデル専用に選択されました。
- テストセットのテストカバレッジスコアが 60% 以上で、インテントごとに少なくとも 5 つのテスト発言がある。詳細については、「テストセットの作成と管理」を参照してください。
- テストセットに少なくとも 100 個の発言があります。
- モデルは構築済みモデルではありません。
- 推奨されるしきい値は、現在のしきい値よりも良い結果になります。
推奨しきい値のテスト結果には、2 番目の図が含まれています。2 番目の図は、推奨しきい値が適用された予測率を示しています。
しきい値の推奨事項を適用すると、モデルの予測率が向上する場合があります。[ 推奨事項を適用 ] を選択してしきい値を変更します。モデルが自動的に再トレーニングされ、テスト結果には新しいしきい値の予測率が表示されます。