チャット回答にナレッジを効かせる
チャット回答にナレッジを効かせる
ナレッジを書いたのにチャット回答に反映されないときの原因と改善方法です。
仕組み
チャット回答時、ベクトル検索で関連ナレッジを候補として取得し、LLMが最適なページを選んで回答に引用します。
効かない主な原因
- 検索に引っかからない: タイトル・本文・タグに質問と関連する語がない
- 候補には出るが選ばれない: 内容が質問とずれている、冒頭に要点がない
- トークン超過: 大きすぎるページは検索精度が下がります。インポート時は自動分割され意図した範囲が候補から外れることがあり、エディター保存・MCP 直接書込では 80,000 トークン超過で保存エラーになります(→ No.1.3)
- プライベートアイノウ: 権限のないユーザーには当然効かない
- 古い・陳腐化: 更新日が古く関連度が下がっている
改善コツ
- 想定質問をそのままタイトルや見出しに含める
- 1ページ1テーマに分割する
- タグを適切に付ける
- 関連ナレッジで補完関係をリンクする
- 修正したら 回答確認(エディターヘッダーの壁打ち機能)で同じ質問を投げ、正しく答えるか確認する(未保存の編集は反映されないので保存してから。→ No.4.2)
- チャットで試し、利用分析の採用率を確認する
- フィードバック・未回答質問を手がかりに改善する