NLU モデルのドラフトバージョンと公開バージョンの比較

  • リリースバージョン: Washingtondc
  • 更新日 2024年02月01日
  • 1 読むのに数分読む

    • ドラフトトレーニング済み 自然言語理解 (NLU) (NLU) モデルを最新の公開バージョンと比較します。変更をテストおよびレビューして、ドラフトモデルのパフォーマンスが向上することを確認します。

    始める前に

    • プラグイン、 NLU ワークベンチ Core プラグイン、 NLU ワークベンチ Advanced Features プラグイン、および Predictive Intelligence プラグインがインストールされ、アクティブ化されていることを確認しますNLU ワークベンチ。
    • 必要なロール:nlu_editor、nlu_admin、または admin エディターをモデルに割り当てる必要があります。

    このタスクについて

    このシナリオ例では、予測信頼スコアを向上させることを目的として、公開された NLU モデル NLU ワークベンチ を反復的にトレーニングして試しています。

    モデルに対して発話を試行すると NLU 、次のようになります。
    • モデルがトレーニング済みで公開されていない場合、[モデルのテスト] パネルにはトレーニング済みモデルの結果のみが表示されます。
    • モデルがトレーニングされて公開されている場合、[モデルのテスト] パネルには公開されたモデルの結果のみが表示されます。
    • 公開されたモデルに変更を加えてトレーニングした場合、[テストモデル] パネルには、比較のためにトレーニング済みモデルの結果と公開されたモデルの結果の両方が表示されます。

    この手順例では、構築済みの読み取り専用人事モデルからモデルのクローンを作成しました。構築済みモデルの既存のインテントを活用しながら、モデルのクローンを作成して独自のビジネス固有のバージョンを作成しました。

    手順

    1. 移動先 すべて > NLU ワークベンチ > モデル.
      デフォルトで 仮想エージェント タブが開きます。
    2. モデルのアプリケーションに対応するタブを選択し、公開したモデルの名前を選択します。
    3. モデルの概要ページで、 [ モデルを構築してトレーニングする ] カードを見つけ、その [ビュー] フェーズをクリックします。
    4. インテント、発言、エンティティ、または語彙を変更します。
      このシナリオ例では、 #UpdateEmail インテントにトレーニング発言をいくつか追加します。
    5. 変更されたモデルをトレーニングして試すと、その予測スコアを公開バージョンのスコアと比較して確認できます。
      1. [ モデルのトレーニング] タブで、[ トレーニング ] ボタンをクリックします。
      2. トレーニングが終了すると、「 モデルが正常にトレーニングされました (The model has been successfully trained)」と表示されます。
      3. [ モデルを試す ] タブに、「 間違ったメール アドレス」という発話を入力します。
      4. [移動 (Go)] をクリックします。

      パネルには、公開されたモデルとトレーニング済みモデルの両方の予測結果が表示されます。変更前と変更後の 2 つのバージョンのモデルの結果を比較します。この例では、信頼スコアがわずかなマージンで増加しています。モデルのコンテンツを大幅に変更することで、信頼スコアや意図予測が変わる可能性があります。

      テストパネルに予測結果の比較機能があるインテントページ。

    次のタスク

    テストパネルの情報を使用して、行った変更によってモデルのパフォーマンスが向上するかどうかを確認します。変更に問題がなければ、公開する前にモデルをテストします。次に、モデルを公開して、現在公開されているバージョンを置き換えます。