クラシック・エクスペリエンスのみ

この情報は、クラシック・エクスペリエンスのダイアログ・スキル分析に適用されます。 watsonx Assistantでの分析について詳しくは、 分析を使用したアシスタント全体の概要の確認 を参照してください。

アナリティクスの概要ページでは、ユーザーとアシスタント間のやり取りの概要が提供されます。

分析は、以下のことを理解するのに役立ちます。

• お客様は現在どのような支援を必要としていますか?
• アシスタントはお客様のニーズを理解して対応していますか?
• アシスタントを向上させるにはどうすればよいですか?

メトリックの情報を表示するには、ナビゲーション・バーの**「概要 (Overview)」**を選択します。 ユーザーがアシスタントと対話した後、Analyticsの情報はすぐに更新されません Watson AssistantはバックグラウンドでAnalytics用のデータを準備します。

メトリックの数値が 3,000 を超えると、ページ内のパフォーマンス・ラグを回避するために合計が概算されます。

スコアカード

スコアカードでメトリックを素早く確認できます。 スクロールすると、ページの後半にある完全な対話式グラフが表示されます。

• 会話総数 (Total conversations): 選択された期間中にアクティブ・ユーザーとアシスタントの間で行われた会話の総数。 合計会話数とユーザー会話ページには、アシスタントとお客様の両方が参加した会話のみが含まれます。 アシスタントからの歓迎メッセージのみ、またはユーザーからのメッセージがゼロ長のみの会話は含まれません。 このメトリックは、請求の目的では使用されません。 お客様がメッセージを送信するまで、ユーザーとのやり取りは請求可能な会話と見なされません。
• 会話あたりの平均メッセージ数 ：選択した期間中に受信したメッセージの総数を、選択した期間中の総会話数で割った値。対応するグラフに表示されている。
• 最大会話数 (Max. conversations): 選択された期間内の単一データ・ポイントにおける最大会話数。
• 理解不十分 (Weak understanding): 理解不十分な個別メッセージの数。 これらのメッセージは、インテント別に分類されず、既知のエンティティーを一切含んでいません。 認識されないメッセージを検討すると、ダイアログの潜在的な問題を見つけ出すのに役立ちます。

グラフと統計

以下の詳細なグラフによって追加情報が提供されます。 グラフ上のデータポイントをクリックすると、詳細が表示されます。

• 包含 (Containment): 人の介入なしにアシスタントが顧客の要求を満たすことができる会話の数。

  • ボリューム・グラフは、1 日当たりの会話の総数と、会話のうち包含された数と包含されなかった数を示します。
  • 傾向グラフは、包含された毎日の会話のパーセンテージを示します。 このグラフは、アシスタントの会話の包含率が時間の経過とともに良くなっているのか悪くなっているのかを調べるのに役立ちます。

  

  包含メトリックのためには、外部サポートの要求が発生したときにダイアログが要求にフラグを立てる必要があります。 詳しくは、抑制の測定を参照してください。

• カバレッジ (Coverage): 顧客の要求に対応できるとアシスタントが確信している会話の数。

  • ボリューム・グラフは、1 日当たりの会話の総数と、会話のうちカバーされた (ダイアログ内のインテントがユーザー要求を理解して対応できたということ) 数と、カバーされなかった (入力がダイアログ内のインテントと一致しなかったために、代わりに Anything else ノードによって処理されたということ) 数を示します。
  • 傾向グラフは、カバーされた毎日の会話のパーセンテージを示します。 このグラフは、ダイアログが会話をカバーする率が時間の経過とともに良くなっているのか悪くなっているのかを調べるのに役立ちます。

  

  に関する 2 つのカバレッジ・メトリックを示します。

  カバレッジメトリックでは、ダイアログに 「Anything else」 ノードが含まれている必要があります。 詳しくは、会話を正常に終わらせる を参照してください。

  包含メトリックおよびカバレッジ・メトリックは、プラス・プランまたはエンタープライズ・プランのユーザーが使用できます。

• 会話総数 (Total conversations): 選択された期間中のアクティブ・ユーザーとアシスタントの会話の総数。 この数は、ユーザーが応答しない場合でも、ウェルカム・メッセージがユーザーに表示される交換をカウントします。

• 会話あたりの平均メッセージ数- 選択した期間中に受信したメッセージの総数を、選択した期間中の総会話数で割ったもの。

• メッセージ総数 (Total messages) - 選択された期間中にアクティブ・ユーザーから受信されたメッセージの総数。

• アクティブユーザー- 選択した期間内に、あなたのアシスタントとやり取りしたユニークユーザーの数。

• ユーザーあたりの平均会話数 (Average conversations per user) - 選択された期間中の会話総数をユニーク・ユーザーの総数で割った値。

  アクティブ・ユーザー および ユーザー当たりの平均会話数 の統計では、メッセージに固有の user_id パラメーターを指定する必要があります。 この値は請求処理の目的で使用されるため、通常はすべての統合によって指定されます。 詳しくは、ユーザー・ベースのプランの説明を参照してください。

コントロール

以下のコントロールを使用して情報をフィルタリングできます。

• 期間 (Time period) - このコントロールを使用して、表示データの期間を選択します。 この制御は、ページに表示されるすべてのデータに影響します。グラフに表示される会話の数だけでなく、グラフと共に表示される統計情報、およびトップインテントとエンティティのリストにも影響します。

  これらの統計は、会話ログの保持期間より長い期間を対象範囲に含めることができます。

  

  表示データの期間として、1 日、1 週間、1 カ月、または四半期から選択できます。 いずれの場合も、該当する測定期間に合わせてグラフのデータ・ポイントが調整されます。 例えば、1日のグラフを表示すると、データは1時間ごとの値で表示されますが、1週間のグラフを表示すると、データは日ごとに表示されます。 1 週間は、日曜日から始まり土曜日に終わります。

  木曜日から次の水曜日までの 1 週間や、1 日以外の日付から始まる 1 カ月間など、カスタム期間を作成することもできます。

  各会話に表示されている時間は、お使いのブラウザのタイムゾーンを反映しています。 ただし、APIログの呼び出しは、協定世界時で常に表示されます。 そのため、例えば1日表示を選択した場合、同じ会話のログで指定されたタイムスタンプと、可視化で表示される時間が異なる場合があります。

  

• インテントとエンティティのフィルター - これらのフィルターのいずれかを使用して、スキル内の特定のインテントまたはエンティティのデータを表示します。

  インテントとエンティティーのフィルターには、データ・ソースの内容ではなく、スキル内のインテントとエンティティーが含まれています。 スキル以外の データソースを選択した場合、そのデータソースのログに表示されるインテントやエンティティがスキルのものにも含まれていない限り、それらのインテントやエンティティがフィルタのオプションとして表示されない場合があります。

• データの最新表示: ページ・メトリックで使用されるデータを最新表示するには、**「データの最新表示」**を選択します。

  統計は、アシスタントと対話する顧客からのトラフィックを示します。「試行する (Try it out)」 ペインからの対話は含まれていません。

上位インテントと上位エンティティー

指定した期間中に最も多く認識されたインテントとエンティティーも確認できます。

• 上位インテント (Top intents) - インテントがシンプルなリストで表示されます。 インテントが認識された回数を確認できます。 ユーザーとの会話ページを開くための意図を選択し、表示中のデータに一致するようにフィルタリングされた日付範囲と、選択した意図に一致するようにフィルタリングされた意図を選択できます。

• 上位エンティティー (Top entities) はリストにも表示されます。 エンティティを選択すると、表示中のデータに一致するようフィルタリングされた日付範囲と、選択したエンティティに一致するようフィルタリングされたエンティティで、 ユーザー会話ページを開くことができます。

アシスタントによって認識されたインテントとエンティティーを確認し、わかったことを基にインテントとエンティティーを編集するためのヒントについては、スキルの改善を参照してください。