llm-citation-monitor について
llm-citation-monitorは、アシスタントや検索画面でサイトが引用されるかを測定するチーム向けスキルです。手動での証拠収集、報告形式、根拠のない主張を避けるための規則を定めます。
主な機能
- 01対象質問のマトリクス
- 02手動観察のワークフロー
- 03引用証拠のラベル
- 04競合の引用記録
- 05プライバシーと証拠の規則
活用シーン
- 01対象ページの引用確認を計画
- 02引用の観察結果を記録・比較
- 03競合の引用を分けて報告
インストール
コマンドをコピーしてターミナルで実行します。
$
npx skills add https:/ / github.com/ sergekostenchuk/ ui-ux-agent-skill-system --skill llm-citation-monitorインストール後、Claude Code で/llm-citation-monitorを入力して読み込まれたか確認します。
同梱ファイル
SKILL.md と一緒にインストールされる参考資料やスクリプト。
evals.jsonagents/openai.yamlassets/citation-report.template.mdquery-matrix.template.mdreferences/citation-evidence-policy.md詳細
LLM 引用モニター
対象サイトの SEO/LLM ディスカバリー層が整備され、ユーザーがアシスタント/検索での引用状況を測定したい場合に、このスキルを使用します。
モニタリング計画やレポートを作成する前に、references/citation-evidence-policy.md をお読みください。
担当範囲
- 対象質問のマトリックス;
- 手動での観察ワークフロー;
- 引用レポートのテンプレート;
- アシスタント/検索サーフェスの証拠ポリシー;
- 競合他社の引用記録;
- パーソナライズ、ロケール、情報の新しさ、アカウント状態に関する注意事項;
- 裏付けのない引用の主張を拒否すること。
担当範囲外
- アシスタントのアカウント認証情報;
- ボット対策の回避;
- 承認を得ずにアシスタント/検索サーフェスをスクレイピングすること;
- robots、WAF、認証、クローラーポリシーの変更;
- ランキングに関する主張;
- コンテンツ/スキーマの実装。
ワークフロー
- 対象サイト、ページ群、オーディエンス、ロケール、対象質問を定義します。
- クエリの意図を分類します:ブランド、トピック、課題、比較、ハウツー、引用確認。
- 承認済みの観察方法を選択します:手動、エクスポートしたトランスクリプト、スクリーンショット、API/ツールレポート、または公開情報の取得。
- 各実行について、サーフェス、表示されている場合はモデル/検索製品、日時、ロケール、アカウント状態、クエリテキスト、回答の要約、引用 URL、引用文/スニペット、注意事項を記録します。
- 競合他社の引用は、対象の引用とは別に記録します。
- 引用が見つからない場合は
not observedと記録し、「どこにも引用されていない」とは記録しません。 - assets/citation-report.template.md を使用してレポートを作成します。
- サイトコンテンツまたは技術的な修正は、SEO/LLM アーキテクチャスキルの担当者に引き継ぎます。
必須事項
- 直接的な引用の証拠がない限り、「ChatGPT が当社を引用している」と主張しないでください。
- ある回答がパーソナライズされたものであることを考慮せず、普遍的なランキングとして扱わないでください。
- アシスタントの認証情報、Cookie、アカウントトークン、非公開の会話データをスキルファイルに保存しないでください。
- ペイウォール、認証、robots、WAF、ツールの制限を回避しないでください。
- 利用規約に反してサーフェスをスクレイピングしないでください。
- 非公開のユーザーデータを含むスクリーンショット/トランスクリプトを公開しないでください。
安全性とプライバシーの境界
- レポートに含めるのは、承認済みの公開クエリテキスト、公開されている引用 URL、編集済み/プライバシー保護済みのスニペットのみとします。
- スクリーンショットやトランスクリプトにアカウント情報が含まれている場合は、共有アーティファクトに追加する前に削除してください。
- ユーザーから非公開のアシスタントトランスクリプトが提供された場合は、ローカルで要約し、保存する前に確認を求めてください。
- モデルのバージョン、ロケール、日時、アカウント状態は、付随的なメタデータではなく、証拠の一部として扱ってください。
証拠ラベル
Cited:対象 URL が回答または引用パネルに引用 URL/ソース URL として表示されている。Mentioned:対象のブランド/ページには言及しているが、引用はしていない。Not observed:この実行では対象の引用が見つからなかった。Competitor cited:対象の質問に対して、別のドメインが引用された。Invalid evidence:タイムスタンプ、サーフェス、クエリ、または引用 URL が欠けている。
検証
以下を実行してスキルの編集内容を検証します:
python3 $CODEX_HOME/skills/senior-skill-architect/scripts/lint_production_skill.py $HOME/SKILL/skills/llm-citation-monitor
python3 $HOME/SKILL/plans/seo-llm-skill-cluster/scripts/lint_skill_cluster.py $HOME/SKILL
フォワードテストは evals.json にあります。
出力形式
以下を返します:
- モニタリングの目的と対象ページ。
- クエリマトリックス。
- 承認済みのサーフェスと観察方法。
- 引用の証拠テーブル。
- 競合他社の引用テーブル。
- 注意事項と制限。
- 適切なスキル担当者に割り当てた修正バックログ。
コメント
Markdown 対応