ヒットログには、メンバーがコミュニティのAIアシスタント(AI Copilot)に何を質問し、アシスタントがどの程度うまく回答したかが表示されます。管理画面 → AIコパイロット → ヒットログで、回答とその出典を確認し、アシスタントが苦手な質問を見つけ、足りない回答をナレッジベースに追加します。
対象者:オーナーと管理者。 · 場所:ウェブ(管理画面)。 · プラン:AI Copilot を含むプラットフォームプランが必要です。
AIアシスタントのヒットログに記録される内容
管理画面 → AIコパイロット → ヒットログに移動します。ページのタイトルは質問ヒットログで、最近の質問とコンテンツギャップの 2 つのタブがあります。
最近の質問には、メンバーが AIアシスタントにした質問が 1 件ずつ表示されます。
| 列 | 表示される内容 |
|---|---|
| クエリ | メンバーの質問。アシスタントが回答できなかった場合は、その下にエラーコードが表示されます |
| 信頼度 | 高、中、低のいずれか |
| ソース | 回答のもとになった場所。KB(ナレッジベース)、Community、Hybrid のいずれか |
| モード | キーワード検索またはセマンティック検索 |
| 後処理チェック | 回答に対する最終チェックの結果。passed、failed、rejected_low_confidence のいずれか |
| カバレッジ | 回答のうち引用で裏付けられている割合(0~1) |
| L1 / L2 | 見つかったナレッジベースの結果(L1)とコミュニティの投稿の結果(L2)の数 |
| レイテンシーと時刻 | 回答にかかった時間と、質問された日時 |
ヒットログには、どのメンバーが質問したかは表示されません。AI ライティングツールと AI によるコースアウトラインは、ここには記録されません。
AIアシスタントの最近の質問を絞り込む
表の上にあるフィルターで、最近の質問を絞り込みます。
- ソーススコープ:KB、コミュニティ、ハイブリッド。
- 検索モード:キーワードまたはセマンティック。
- 後処理チェック:たとえば rejected_low_confidence を選ぶと、根拠が弱かったために回答が控えられた質問を見つけられます。
フィルターをクリアをクリックするとリセットされ、更新をクリックすると新しい質問が読み込まれます。
AI の回答の詳細を確認する
質問をクリックすると、質問詳細が開きます。信頼度とカバレッジのスコアに続いて、次の内容が表示されます。
- 回答:メンバーが受け取った回答の全文。
- 引用:回答の下に表示された出典と、それぞれの抜粋。
- 取得フラグメント:AIアシスタントが検索中に見つけたすべての結果(引用しなかったものを含む)。各フラグメントにはスコアがあります。これはフラグメント同士の順位付けにだけ使われる値で、パーセントではありません。
良い出典が取得されたのに引用されなかった場合や、間違った投稿が 1 位になっている場合は、コミュニティコンテンツの設定を調整します。AIアシスタントが検索できるスペースを選ぶを参照してください。
Q&A エントリでコンテンツギャップを埋める
コンテンツギャップタブには、AIアシスタントが低い信頼度で回答した質問がまとめられており、ソースでカバーされていないトピックがわかります。各行には、質問、質問された回数(件数)、平均信頼度、主なソース、最終確認の日時が表示されます。
回答を追加するには、次の手順に従います。
- 質問の横にあるKBに追加をクリックします。Q&A のナレッジソースがまだない場合は、Mateflow が作成します。
- ナレッジベースにQ&Aを追加で、質問を確認し、回答を書きます。Markdown が使えます。下書きから始めるには、AIで下書きをクリックし、内容を注意深く確認します。
- 必要に応じて、別の言い回しを 1 行に 1 つずつ追加します。
- ナレッジベースに追加をクリックします。
エントリはすぐにインデックスされ、そのギャップは解決済みになって一覧から消えます。回答しないギャップを消すには、閉じるをクリックします。
AI の回答を改善するその他の方法
Q&A エントリは、1 つの質問に正確な回答を与えます。より広いギャップには、次の方法を使います。
- ナレッジベースにファイルをアップロードするか、ウェブサイトをインポートします。AIアシスタントにナレッジソースを追加するを参照してください。
- コミュニティコンテンツを有効にするか、回答が載っているスペースを追加します。AIアシスタントが検索できるスペースを選ぶを参照してください。
- AIアシスタントが検索するスペースに、回答を投稿として公開します。
メンバーは AI の回答を評価できないため、回答の質を知る主な手がかりは、信頼度、後処理チェック、コンテンツギャップです。コンテンツを追加したら、もう一度最近の質問を確認し、信頼度が改善したかどうかを確かめてください。
関連記事
このガイドは役に立ちましたか?