インサイト

概要

公開されたエージェントのパフォーマンスを追跡し分析するために、インサイトダッシュボードを用います。このエージェントインサイトモジュールは、エージェントの効率性、利用状況、ユーザー統計、システム状態に関する指標等の利用データを提供します。このデータを活用することで、エージェントをユーザーのニーズに更に適応させるための最適化を、具体的に行うことが可能です。

左メニューの「インサイト」から「エージェント」を選択し、インサイトダッシュボードを開きます。

データの定義

インサイトダッシュボードに表示される全ての指標は、以下のコアデータで表現されています：

ユーザー：AIエージェント内で生成される匿名IDの数です。匿名IDはユーザーを特定するための一意の識別子です。
- 新規ユーザー：指定した期間内にAIエージェントが作成したユーザーの数です。
- アクティブユーザー：指定した期間内にAIエージェントから少なくとも1つのメッセージを受け取ったユーザーの数です。
コンバーゼーション：AIエージェント内で発生した"conversation_id"の数です。複数の対話が1つのコンバーゼーションを構成します。
インタラクション：AIエージェント内で発生した"qa_id"の数です。1つのインタラクション（質疑応答）は1つのユーザーからの質問と1つのAIエージェントからの回答で構成されます。
クレジット：AIエージェントが利用したクレジットの量です。
トークン：AIエージェントが利用したトークンの量です。
レスポンス時間（秒）：AIエージェントがメッセージリクエストを送信し、レスポンスを受け取るまでの時間です。
エラー：AIエージェントがメッセージリクエストを送信し、エラーレスポンスを受け取った回数です。
分あたりの平均リクエスト数：AIエージェントが分あたりに送信するメッセージリクエストの平均数です。

各指標の詳細な内容については、ページ上のツールチップ情報をご参照ください。

指標のカテゴリ

インサイトダッシュボードでは、全ての指標が6つの大きなグループに分かれており、データを目的に応じて表示することができます。

注意：[リアルタイム]は今日のデータを表示しますが、他の5つのカテゴリは前日までのデータを最新として表示します。

リアルタイム：上述した各種のデータ指標を通じて、当日のAIエージェントのデータをリアルタイムで更新し、即時の洞察を提供します。
効果：ユーザーフィードバック、問題解決率、人間のカスタマーサービスへのエスカレーション率等を含む、AIエージェントの問題解決能力を追跡します。
使用量：クレジットとトークンの使用量のトレンド、およびそれらがどの程度使用されているか等を、AIエージェントのクレジット消費に関して監視します。
ユーザー：総ユーザー数、新規ユーザーの増加数、アクティブユーザー数等、AIエージェントのユーザーメトリクスを追跡します。
行動：コンバーゼーションの量のトレンド、インタラクションの回数、それらがどの範囲で分散しているか等、AIエージェントのコンバーゼーションデータを分析します。
ヘルス：レスポンス時間やエラーレート等、AIエージェントの動作関連指標を監視します。