NLU モデル設定

  • リリースバージョン: Yokohama
  • 更新日 2025年01月30日
  • 所要時間:2分
  • モデル概要の [設定] ページで、NLUモデルの名前、説明、または信頼度しきい値を変更します。

    に移動して、モデルの設定にアクセスします All (すべて) > NLU ワークベンチ > モデル. モデルのアプリケーションのタブを選択してから、モデルの名前を選択します。モデルの概要で、[ モデル設定 ] タブを選択します。モデルの概要ページのモデル設定

    モデル設定

    モデル設定ページの上部セクションでは、モデルの名前、簡単な説明、およびビジネスエリアを変更できます。モデルの言語、目的、またはスコープを変更することはできません。別の言語、目的、またはスコープでモデルを作成するには、「 モデルの作成」を参照してください。

    デフォルトでは、[ 句読点を無視 ] チェックボックスはオンになっています。句読点を無視すると、句読点がわずかに異なる発言の予測されるインテントと信頼スコアの間の差異が少なくなります。最良の結果を得るには、チェックボックスをオンのままにします。

    モデルのしきい値設定

    ここでは、モデルでの信頼性しきい値の動作を調整できます。

    しきい値は、パーセンテージで表される信頼スコアです。モデルの信頼度しきい値によって、特定の発言に対してそのモデルのどのインテントが予測されるかが決まります。たとえば、モデルのしきい値が 65% の場合、インテントの信頼スコアが 65% 以上である場合にのみ、発言のインテントが予測されます。しきい値の設定が低すぎると、発言に一致すべきではないインテントが予測されるため、誤検出が増加する可能性があります。一方、モデルしきい値が高すぎると、予測するインテントが除外される可能性があります。理想的なしきい値を見つけることで、インテントを正しく予測するモデルの能力が向上します。

    モデルしきい値設定には、次の 2 つのタイプがあります。
    • 自動 - モデルに最適な信頼度しきい値が自動的に選択されます。値はテスト結果に基づいて動的に更新されます。これは、モデルのデフォルトのテストセットが使用されるモデルを テストして公開 するフェーズで発生します。
    • 手動 :信頼度しきい値を手動で設定できます。システムは、テスト中にモデルに対してより適切なしきい値を推奨する場合もあります。推奨事項を受け入れることを選択できます。

    ビルド済みモデルには、調整されたしきい値が付属しています。構築済みモデルの信頼度しきい値は、そのモデル専用に選択されています。

    テスト結果には、次の要件を満たす場合にのみ 、モデルしきい値の推奨事項 が含まれます。
    • テストセットのテスト範囲スコアが 60% 以上で、インテントごとに少なくとも 5 つのテスト発言がある。詳細については、「テストセットの作成と管理」を参照してください。
    • テストセットに少なくとも 100 個の発言がある。
    • モデルは構築済みモデルではありません。
    • 推奨されるしきい値を使用すると、現在のしきい値よりも良い結果が得られます。
    現在のしきい値と推奨しきい値の棒グラフを含むテスト結果ページ。

    推奨されるしきい値を持つテスト結果には、2 番目のグラフィックが含まれます。2 番目のグラフは、推奨しきい値を適用した場合の予測の割合を示しています。

    しきい値の推奨事項を適用すると、モデルの予測率が向上する場合があります。[ 推奨事項の適用 ] を選択して、しきい値を変更します。モデルは自動的に再トレーニングされ、テスト結果には新しいしきい値での予測率が表示されます。