source-credibility-evaluation-protocol

情報源の信頼性を評価するプロトコル

このスキルでできること

特定の種類の情報源を評価するための、体系的な横断的読解プロトコルを作成します。情報源そのものだけを個別に分析するのではなく、他の情報源がその情報源について何を述べているかを確認する方法を生徒に教えます。このアプローチは、プロのファクトチェッカーが情報源の評価において生徒や大学教授より優れているのは、垂直的に（信頼性の「手がかり」を求めて情報源自体をより注意深く読むのではなく）、横断的に読んで（新しいタブを開き、情報源の背後に誰がいるかを確認して）いるからだという研究結果に直接基づいています。出力には、段階的なプロトコル、教師が実演するための台本、情報源の種類に応じた注意点と信頼性の兆候、生徒用チェックリストが含まれます。効果的な情報源の評価には、一般原則（横断的読解、主張の追跡）と情報源の種類に固有の知識（信頼できるニュース記事と信頼できる科学研究では、判断基準が異なります）の両方が必要です。この組み合わせを専門知識なしに教えるのは難しいため、ここで AI が特に役立ちます。

根拠となる研究

Wineburg と McGrew（2017、2019）は、プロのファクトチェッカーが生徒や大学教授と根本的に異なる方法で情報源を評価することを示す画期的な研究を実施しました。ファクトチェッカーは「横断的読解」を行います。情報源にとどまり、信頼性の手がかりを探すのではなく、すぐに新しいタブを開き、情報源の著者、発行者、主張について他の情報源が何を述べているかを確認します。これに対して、生徒や教授は「垂直的読解」を行い、ページから離れず、プロらしいデザイン、.org ドメイン、ページに記載された著者の経歴など、簡単に操作できる表面的な信頼性の指標を探します。横断的に読む人が正しい評価にたどり着くまでにかかった時間は平均93秒でしたが、垂直的に読む人は5分以上かかり、誤った判断をする割合も高くなりました。Breakstone ら（2021）は、米国の高校生の大多数がオンライン情報源を確実に評価できず、プロらしいデザインやページ上の経歴情報に簡単にだまされることを明らかにしました。Caulfield（2019）は、この研究を SIFT メソッドとして実践に落とし込みました。Stop（関わる前に立ち止まる）、Investigate the source（情報源の背後にいるのは誰かを調べる）、Find better coverage（他の情報源が何を述べているかを調べる）、Trace claims（主張をたどって原典を見つける）です。このフレームワークにより、横断的読解を教えられるようになります。Hobbs（2010）は、デジタルリテラシーとメディアリテラシーには体系的な指導が必要であり、インターネットを使うだけでは生徒の情報源評価スキルは自然に身につかないことを示しました。

入力スキーマ

教師は次の情報を入力する必要があります。

• 情報源の種類： どのような種類の情報源か。例：「ウェブサイト」／「ニュース記事」／「ソーシャルメディアの投稿（Instagram のインフォグラフィック）」／「YouTube 動画」／「Wikipedia の記事」／「科学研究の要旨」
• 評価の目的： なぜ生徒が評価するのか。例：「生徒が地理の論文を書くために気候変動について調べており、信頼できる情報源を見つける必要がある」／「ある生徒が X と主張する TikTok 動画を共有したため、クラスでその内容を評価したい」
• 生徒の学年： 学年。例：「Year 9」

任意（利用可能な場合はコンテキストエンジンが挿入）：

• 具体的な情報源： 評価対象となる実際の情報源の説明
• 生徒のプロフィール： デジタルリテラシーのレベル、これまでの経験
• 教科分野： 教科の文脈
• よくある間違い： 教師がこれまでに確認した情報源評価の誤り

プロンプト

You are an expert in digital literacy and source evaluation pedagogy, with deep knowledge of Wineburg & McGrew's (2017, 2019) research on lateral reading, Caulfield's (2019) SIFT method, and Breakstone et al.'s (2021) findings on students' civic online reasoning. You understand that most students (and many adults) evaluate sources using ineffective vertical reading strategies — checking the source itself for "clues" about reliability — and that effective evaluation requires lateral reading: checking what EXTERNAL sources say about the source in question.

Your task is to generate a source evaluation protocol for:

**Source type:** {{source_type}}
**Evaluation context:** {{evaluation_context}}
**Student level:** {{student_level}}

The following optional context may or may not be provided. Use whatever is available; ignore any fields marked "not provided."

**Specific source:** {{specific_source}} — if not provided, create a plausible example source of this type for the modelling script.
**Student profiles:** {{student_profiles}} — if not provided, assume students have limited formal training in source evaluation and tend to judge credibility by appearance (professional design = trustworthy).
**Subject area:** {{subject_area}} — if not provided, infer from the evaluation context.
**Common mistakes:** {{common_mistakes}} — if not provided, include the most common source evaluation errors for this age group: trusting professional-looking design, confusing .org with automatic credibility, accepting information because it confirms what they already believe.

Apply these evidence-based principles:

1. **Lateral reading over vertical reading (Wineburg & McGrew, 2017, 2019):**
   - The protocol must teach students to LEAVE the source and check external references — not to scrutinise the source itself for credibility cues.
   - Vertical reading cues students commonly rely on (and shouldn't): professional design, .org domain, author credentials listed on the page, presence of references, "About Us" page claims.
   - Lateral reading moves: search the author's name, search the organisation's name + "credibility" or "funding," check if other reputable sources make the same claim, trace quoted statistics to their original source.

2. **SIFT framework (Caulfield, 2019):**
   - **Stop:** Before engaging with the source, pause. Don't start reading, sharing, or citing until you've evaluated it.
   - **Investigate the source:** Who is behind this? What do OTHER sources say about this author/organisation? (Not what the author/organisation says about themselves.)
   - **Find better coverage:** Do other reliable sources report the same information? If only one source makes this claim, be cautious.
   - **Trace claims:** When a source cites a statistic, quote, or study, trace it back to the original. Does the original say what the source claims it says?

3. **Source-type-specific guidance:**
   - Different source types have different credibility indicators and different manipulation techniques.
   - A protocol for evaluating a news article should address different issues than one for evaluating a social media infographic.
   - Adapt the SIFT steps to the specific source type.

4. **Avoid false sophistication:**
   - Students often learn a checklist approach (CRAAP test, etc.) that produces a false sense of sophistication — they check boxes without actually evaluating. The protocol should teach THINKING, not box-ticking.
   - The most important question is always: "What do INDEPENDENT, KNOWLEDGEABLE sources say about this?" — not "Does this source LOOK reliable?"

5. **Model the process explicitly:**
   - Include a think-aloud modelling script where the teacher demonstrates lateral reading with a specific example.
   - Show the contrast between what a vertical reader would do (and get wrong) and what a lateral reader would do (and get right).

Return your output in this exact format:

## Source Evaluation Protocol: [Source Type]

**For:** [Student level]
**Context:** [Why students are evaluating this source]
**Method:** Lateral reading (SIFT framework)

### The Protocol

[Step-by-step protocol adapted for this source type — each step should explain WHAT to do, WHY it matters, and WHAT TO LOOK FOR]

### Teacher Modelling Script

[A think-aloud script showing the teacher evaluating a specific example of this source type, demonstrating lateral reading. Show the contrast with what a vertical reader might do wrong.]

### Red Flags and Green Flags

**Red flags (reasons to be cautious):**
[Source-type-specific indicators of unreliability]

**Green flags (reasons to be more confident):**
[Source-type-specific indicators of reliability]

**Important: green flags are not proof.** [Brief note that even reliable-looking sources can be wrong — green flags increase confidence but don't guarantee accuracy]

### Student Checklist

[A concise, printable checklist students can use independently when evaluating sources of this type]

**Self-check before returning output:** Verify that (a) the protocol prioritises lateral reading over vertical reading, (b) each step teaches thinking, not box-ticking, (c) the modelling script demonstrates the actual process of checking external sources, (d) red and green flags are specific to this source type, (e) the protocol is age-appropriate, and (f) the student checklist is concise enough to be practically usable.

出力例

シナリオ： 情報源の種類：「ウェブサイト」／評価の目的：「Year 9 の生徒が科学の課題でエナジードリンクの健康への影響を調べています。複数の生徒が、エナジードリンクは安全である、あるいは有益ですらあると主張するウェブサイトを見つけており、教師は、生徒が課題に取り入れる前に、こうした情報源の評価方法を教えたいと考えています。」／生徒の学年：「Year 9」

---

情報源評価プロトコル：ウェブサイト

対象： 9年生の理科 状況： エナジードリンクの健康への影響について調べる際に見つけたウェブサイトの評価 方法： ラテラル・リーディング（SIFT フレームワーク）

プロトコル

ステップ 1：STOP — まだ読み始めない（30 秒）

記事を一言も読む前に、いったん立ち止まってください。このウェブサイトは検索エンジンを通じて見つけましたが、検索結果に表示されているからといって、情報源の信頼性が高いとは限りません。Google は正確さではなく、人気度や検索語との関連性に基づいてページの順位を決めています。

すること： URL を記録します。ウェブサイト／組織の名前を記録します。まだ記事を読み始めないでください。

これが重要な理由： 読み始めると、脳は情報を受け入れ始めます。主張をすでに取り込んでしまうと、その後で情報源を批判的に評価するのはずっと難しくなります。まず評価し、その後で読みます。

ステップ 2：情報源を調査する — このウェブサイトの運営元は？（2～3 分）

これは重要なステップです。ウェブサイト独自の「概要」ページは確認しないでください。どの組織も、自分たちに都合のよいことを書けるからです。代わりに、新しいタブを開いて外部から検索します。

すること：

1. 「[組織名]」を検索し、Wikipedia の記事（存在する場合）と上位 3～4 件の検索結果を読みます。その組織は何者でしょうか。独立した情報源は、その組織についてどのように述べていますか。
2. 「[組織名] funding」または「[組織名] backed by」を検索します。この組織に資金を提供しているのは誰でしょうか。エナジードリンクの安全性について扱うウェブサイトがエナジードリンク企業から資金提供を受けているなら、それは重要な情報です。
3. 「[著者名] credentials」を検索します。この人物は、この分野の資格を持つ専門家でしょうか。医学について書く医師と、医学について書くブロガーでは違いがあります。

確認すること：

• その組織は独立していますか。それとも、その話題について金銭的な利害関係がありますか。
• 著者は関連分野の資格を持つ専門家ですか。
• 独立した情報源は、その組織を信頼できると評していますか。それとも、偏りがある、または物議を醸していると評していますか。

ステップ 3：より良い情報を探す — ほかの信頼できる情報源も同じことを述べていますか。（2～3 分）

ウェブサイトが具体的な主張（「エナジードリンクは10代の若者に健康への悪影響を及ぼさない」など）をしている場合、信頼できる情報源も同意しているか確認します。

すること：

1. 具体的な主張を検索します。「エナジードリンク 健康への影響 10代」
2. 金銭的な利害関係のない組織の情報源を探します。NHS、WHO、大学の研究概要、査読付き学術誌などです。
3. 比較します。そのウェブサイトの主張は、これらの独立した情報源の内容と一致していますか。

確認すること：

• このウェブサイトだけがその主張をしていて、信頼できる情報源がどこも同意していない場合は、十分に注意してください。
• 信頼できる情報源が反対のことを述べている場合、ウェブサイトの見た目がどれほど専門的でも、その主張は信頼できない可能性が高いです。
• 複数の独立した情報源がその主張を裏付けている場合、確信を深めることができます。

ステップ 4：主張の出所をたどる — 統計データはどこから来ていますか。（2～3 分）

ウェブサイトが数値、研究、専門家の引用を示している場合は、元の情報源までさかのぼって確認します。

すること：

1. 数値を含む具体的な主張を見つけます。「ある研究によると、エナジードリンクを飲む人の95％には副作用がないとわかりました。」
2. 元の研究を検索します。実際に存在しますか。ウェブサイトが述べている内容は、本当にその研究に書かれていますか。
3. 確認します。その研究を実施したのは誰ですか。誰が資金を提供しましたか。信頼できる学術誌に掲載されましたか。

確認すること：

• 具体的な出典を示さない曖昧な引用（「研究によると」「調査で証明されている」など）は危険信号です。
• 元の情報源までたどれない統計データも、もう一つの危険信号です。
• 研究は存在するものの、ウェブサイトの主張とは異なる内容を述べている場合、ウェブサイトは根拠を誤って伝えています。

教師によるモデリングスクリプト

「エナジードリンクについて調べているときに見つけたウェブサイトを、私ならどのように評価するかお見せします。『EnergyDrinkFacts.org』というウェブサイトを見つけました。プロらしい印象で、デザインもすっきりしていて、『エナジードリンクと10代の健康についての真実』という記事があります。まず、多くの人がどのようにするかをお見せしてから、私が違うやり方をする理由をご説明します。

多くの人がすること（垂直読み — これは間違った方法です）： 多くの人は記事を読み始めるでしょう。.org ドメインを見て、「これは信頼できるに違いない」と考えるでしょう。記事にいくつかの研究が引用されているのを見て、「エビデンスに基づいている」と考えるでしょう。プロらしいデザインを見て、「信頼できそうだ」と思うでしょう。「私たちについて」のページを確認して、「私たちは、エナジー飲料に関する事実に基づいた情報を提供することを目的とする独立した研究機関です」という説明を読むかもしれません。よさそうに聞こえますよね？ これが垂直読みです。つまり、ウェブサイトにとどまり、手がかりを探すことです。そして、まさにこれが誤情報の仕組みです。誰でも .org ドメインを登録できます。誰でもプロらしいウェブサイトを作れます。誰でも感じのよい「私たちについて」のページを書けます。

私が代わりにすること（横読み — これが正しい方法です）： 私はすぐにこのウェブサイトを離れ、新しいタブを開きます。

[新しいタブを開く] 「EnergyDrinkFacts.org」と検索します。すると……興味深いことが分かります。Wikipedia の記事によると、この組織はエナジードリンクメーカーを代表する業界団体、米国飲料協会によって設立され、資金提供を受けています。つまり、「独立した研究機関」は、実際にはエナジードリンクを販売する企業から資金提供を受けているのです。それだけで信頼できないと決まるわけではありませんが、サイトを読んだだけでは決して分からなかった、不可欠な背景情報です。

次に、「energy drinks health effects teenagers NHS」と検索します。すると、NHS のページには、エナジードリンクに含まれるカフェインは10代の不安、睡眠障害、動悸を引き起こす可能性があり、定期的な摂取は控えるよう勧めているとあります。WHO も同じ見解です。つまり、EnergyDrinkFacts.org の「エナジードリンクは10代にとって安全だ」という主張は、NHS と WHO の見解と矛盾しています。

次に、具体的な主張をたどってみます。このウェブサイトには、「2018年の研究で、エナジードリンクを適量摂取しても健康上の重大なリスクは見られなかった」とあります。この研究を検索すると……Red Bull が資金を提供しており、インパクトファクターの低い学術誌に掲載されていたことが分かりました。一方、主要な医学誌に掲載された、より大規模で独立した研究では、反対の結果が示されていました。

私の結論はこうです。このウェブサイトはプロらしく、信頼できるように見えますが、横読みをすると、業界から資金提供を受けており、その主張が独立したエビデンスと矛盾していることが分かります。私はこのサイトを、プロジェクトの情報源として使いません。

この作業全体にかかった時間は、約3分です。記事自体はほとんど読みませんでした。真実は記事の中にあるのではなく、独立した情報源が何を述べているかにあるからです。」

レッドフラグとグリーンフラグ

レッドフラグ（注意が必要な理由）：

• ウェブサイトがそのトピックに関して金銭的な利害関係を持っています（例：栄養について発信する食品会社のウェブサイト、気候変動について発信する化石燃料会社のウェブサイト）
• 「About Us」ページで、組織が具体的な人物、資金提供者、所属機関を明示せず、曖昧で肯定的な言葉だけで説明されています
• ウェブサイトが「研究」に言及しているものの、リンクを張っていない、または具体的な研究名を挙げていません
• 同じ主張を裏付ける、ほかの信頼できる独立した情報源がありません
• URL は権威がありそうに見えますが、実際には民間組織のものです（.org だからといって非営利団体や信頼できる組織とは限りません。.org は誰でも登録できます）
• ウェブサイトが主流の科学や機関を攻撃しています（「NHSがあなたに知られたくないこと……」など）

グリーンフラグ（より信頼できると考えられる理由）：

• ウェブサイトが認知された機関（大学、政府の保健機関、編集基準を設けている定評ある報道機関）によって公開されています
• 独立した情報源が同じ情報を裏付けています
• 具体的な主張を、査読済みの研究論文までたどれます
• ウェブサイトが断定的な主張をするのではなく、不確実性や複雑さを認めています
• 著者の資格を独立して確認できます
• 内容が、横断的読解で見つかる情報と一致しています

重要：グリーンフラグは証明ではありません。 定評のある機関でも誤りを公表することがあり、信頼できそうな情報源でも個別の主張が間違っていることがあります。グリーンフラグは信頼度を高めますが、正確性を保証するものではありません。個別の主張は必ずほかの情報源と照らし合わせて確認してください。

学生用チェックリスト

SIFT チェック — プロジェクトでウェブサイトを評価するときに使いましょう

手順	アクション	✓
STOP（立ち止まる）	まだ記事を読み始めていません。まず評価します。
INVESTIGATE（調査する）	新しいタブで組織名を検索しました。このウェブサイトの背後に誰がいるか把握しています。
INVESTIGATE（調査する）	「[組織名] funding」または「backed by」を検索しました。資金提供者を把握しています。
INVESTIGATE（調査する）	その組織は、このトピックに金銭的な利害関係を持っています／持っていません。
FIND（見つける）	新しいタブで主要な主張を検索しました。ほかの信頼できる情報源は同意しています／反対しています／この主張をするほかの情報源は見つかりません。
TRACE（たどる）	具体的な統計または主張を見つけ、元の情報源までたどりました。元の情報源は、ウェブサイトの記述を裏付けています／裏付けていません。
MY VERDICT（私の判断）	横断的読解に基づき、この情報源を次のように評価します：信頼できる／注意して利用する／利用しない
MY REASONING（判断の理由）	次の理由から、このように判断しました： _________________________________

---

既知の制限事項

1. 横断的読解にはインターネット接続と時間が必要です。 SIFT のプロセスには情報源ごとに 3～5 分かかります。研究プロジェクトであれば対応できますが、学生がオンラインで目にするあらゆる情報に適用するのは現実的ではありません。このスキルでは、学術的な研究課題に最も適した、徹底した評価プロセスを教えます。日常的なデジタルリテラシーのための、より迅速な経験則（例：「共有する前に情報源を確認する」）も学生には必要ですが、このプロトコルでは扱っていません。

2. このプロトコルは個々の情報源を評価する方法を教えますが、複数の情報源を統合する方法は扱っていません。 あるウェブサイトを評価できる学生でも、複数の情報源から情報を統合したり、相反する証拠を比較検討したり、信頼できる情報源同士でも意見が分かれることを認識したりするのに苦労することがあります。情報源の評価は、調査能力に必要なスキルですが、それだけで十分ではありません。

3. 情報源の種類によっては、ほかの種類より横断的な評価が難しいものがあります。 ウェブサイトやニュース記事は比較的確認しやすく、組織や著者を検索できます。ソーシャルメディアの投稿、匿名のフォーラムへの投稿、出典が示されないまま拡散されるコンテンツは、追跡がはるかに困難です。このプロトコルは、著者や発行者を特定できる情報源に最も効果的です。