使用方法の概要

デフォルトでは、NLU ワークベンチの問題の自動解決調整は精度を最適化します。ビジネス要件に応じて、他の目標に合わせてモデルを調整することもできます。問題の自動解決調整の [分析 ] ステップでは、調整目標リストを使用して、[ 精度]、[ 自動化]、または [バランス] を調整できます。これらのオプションのいずれかを選択すると、それに応じて予測 されるマッチ率 と IAR カバレッジ 率が変化するため、考えられる結果を比較できます。

IAR調整の分析ステップにアクセスするには、nlu_admin ロールを使用して次のように移動します。

1. 次のように移動する。 All (すべて) > NLU ワークベンチ > モデル.
2. [ 問題の自動解決 ] タブを選択し、モデル名を選択します。調整エクスペリエンスは、最初にステップ 1 (フィードバック) で開きます。
3. フィードバックを提供し、[ 分析] ボタンを選択します。ステップ 2 (分析) が開きます。
4. [調整 オプションと予測結果を以下に示します] セクションで、リストを使用して精度 、自動化、またはバランスを調整できます。オプションを選択して、予測されたシナリオを表示します。[ 目標の調整について学ぶ] リンクを選択して、次のウィンドウを開くこともできます。

精度

精度を調整すると、 IAR モデルは、その信頼性が比較的高い場合にのみ予測を行います。これにより、エラー率は低下しますが、解決されるインシデントも少なくなります。

精度は IAR ITSM モデルに推奨される調整オプションであるため、このオプションがデフォルトで選択されています。

自動化

自動化用に調整すると、 IAR モデルはより低い信頼度しきい値で予測を行います。これにより、より多くの予測が得られるため、より多くのインシデントが解決されます。ただし、エラー率が高くなる可能性があります。

残高

バランス調整すると、 IAR モデルは精度と自動化のバランスを取ろうとします。

マッチ率

一致率は、インテントが正しく予測されたインシデントの数を、そのインテントの予測の数で割って定義されます。この比率は、 NO_INTENTを除くすべてのインテントで平均されます。

IAR 範囲

カバー範囲は、モデルがその信頼度しきい値を超える予測を行うことができたために解決されるインシデントの割合として定義されます。予測にエラーが含まれている可能性があります。

チューニングオプションの使用

予測される結果を比較するには、いくつかの異なる調整オプションを選択します。選択したオプションに応じて、予測されるマッチ率と IAR カバレッジ率のシナリオが表示されます。また、これらのレートが選択に応じてどの程度変化するかも表示されます。

「分析」の 「詳細ブレークダウンは次のとおりです」 セクションで詳細情報を確認します。ここでは、モデル内の各インテントに固有の結果にドリルダウンできます。

インテントは、 仮想エージェント トピックにマップされているかどうかに応じて、マップされたインテントとマップされていないインテントにグループ化されることに注意してください。IAR調整でフィードバックを提供した後、インテントからトピックへのマッピングを有効にすることができます。これを行うには、 マップされていないインテントを表示する を展開し、 [その他のインテントをマップする ] ボタンを選択します。これにより、 IAR 管理コンソールが開きます。

要件に最適なチューニングオプションを決定したら、[調整目標の詳細] ウィンドウで [選択肢の保存] ボタンを選択します。次に、 [ モデルを調整して公開する] ボタンを選択して、次の手順に進みます。