feedback-quality-analyser

フィードバックの質の分析と書き換え

このスキルでできること

教師や仲間からのフィードバックを受け取り、Hattie と Timperley（2007）の4段階フィードバックモデルに照らして分析し、レベル、具体性、実行可能性を高めるように書き換えます。分析では、フィードバックが課題、プロセス、自己調整、自己のどのレベルで機能しているかを特定し、生徒に現在の到達度、目指す到達点、そこに至る方法を伝えているかを評価します。AIが特に役立つのは、教師のフィードバックの大半が、経験豊富な教師によるものでも、漠然とした称賛（「よく頑張りました！」）、漠然とした批判（「もっと詳しく書きましょう」）、または自己レベルのフィードバック（「あなたは文章を書くのがとても上手です」）に偏りがちであり、研究によれば学習への効果がないか、むしろ悪影響を与えるためです。プロセスと自己調整を対象としたフィードバックに書き換えるには、ほとんどの教師がこれまで触れたことのないフィードバック研究についての明確な知識が必要です。

エビデンスの基盤

Hattie と Timperley（2007）は包括的なメタ分析を実施し、フィードバックの平均効果量は0.73で、教育研究において最も高い部類に入る一方、その効果には非常に大きなばらつきがあることを明らかにしました。効果的なフィードバックは、次の3つの問いに答えます。どこを目指しているか（フィードアップ）、今どのように進んでいるか（フィードバック）、次に何をすべきか（フィードフォワード）。彼らはフィードバックを4つのレベルに分類しました。課題（正確さ）、プロセス（使用した方略）、自己調整（生徒自身によるモニタリングと制御）、自己（個人的な称賛や批判）です。課題レベルのフィードバックは直近のパフォーマンスを向上させ、プロセスレベルのフィードバックは方略の活用を促し、自己調整へのフィードバックは自立性を育てます。自己レベルのフィードバック（「あなたはとても賢いですね」／「残念な出来です」）には肯定的な効果がなく、課題ではなく自尊心に注意を向けさせることで、学習を損なう可能性があります。Kluger と DeNisi（1996）は、フィードバック介入の3分の1で実際にパフォーマンスが低下したと報告しています。これは通常、フィードバックが自尊心を脅かしたり、課題から注意をそらしたりした場合に起こります。Wisniewski ら（2020）はメタ分析を更新し、情報を含むフィードバック（具体的で課題に関連するもの）は、判断だけを含むフィードバック（成績、称賛、批判）よりも大幅に効果的であることを確認しました。Shute（2008）は、効果的な形成的フィードバックには、具体的で、適時で、脅威を与えず、現在のパフォーマンスと望ましいパフォーマンスの差に焦点を当てることが必要だと示しました。

入力スキーマ

教師は次の情報を提供する必要があります。

• フィードバック文： 分析する既存のフィードバック。例：「よくできました！一生懸命取り組んだことがよくわかります。次回は、分析にもっと詳しい内容を加えましょう。」／「10点中7点です。良い点もいくつかありますが、結論が弱いです。」
• 課題の文脈： 生徒が取り組んでいた内容と学習目標。例：「10年生の歴史のエッセイ。第一次世界大戦の原因について。学習目標：証拠を使って因果関係を論じる。」

任意（利用可能な場合はコンテキストエンジンによって注入）：

• 生徒の成果物の概要： 実際の生徒の成果物についての簡潔な説明
• 生徒のレベル： 学年と能力に関するプロフィール
• 生徒のプロフィール： 自己調整のレベル、言語能力、感情面の要因
• ルーブリック： この課題で使用した達成基準またはルーブリック

プロンプト

You are an expert in educational feedback research, specialising in Hattie & Timperley's (2007) feedback model and Shute's (2008) formative feedback principles. You have deep knowledge of the distinction between feedback levels (task, process, self-regulation, self) and understand why feedback specificity and actionability determine its impact on learning.

Your task is to analyse and rewrite the following feedback:

**Feedback text:** "{{feedback_text}}"
**Task context:** {{task_context}}

The following optional context may or may not be provided. Use whatever is available; ignore any fields marked "not provided."

**Student work summary:** {{student_work_summary}} — if provided, use the details of the actual work to make the rewritten feedback more specific. If not provided, base your analysis and rewrite on what can be inferred from the feedback text and task context.
**Student level:** {{student_level}} — if provided, calibrate language and expectations accordingly. If not provided, infer from the task context.
**Rubric/Success criteria:** {{rubric}} — if provided, reference specific criteria in the rewritten feedback. If not provided, reference the learning objective from the task context.
**Student profiles:** {{student_profiles}} — if provided, consider self-regulation level when pitching feedback (high self-regulation: more self-monitoring prompts; low self-regulation: more specific task and process guidance). If not provided, pitch feedback at a general level.

Analyse the feedback using these evidence-based criteria:

1. **Feedback level diagnosis (Hattie & Timperley, 2007):**
   - **Task level:** Does it tell the student what is correct or incorrect about their specific work? (Useful but limited — doesn't help them improve next time.)
   - **Process level:** Does it address the strategies, skills, or processes the student used? (More powerful — transfers to future tasks.)
   - **Self-regulation level:** Does it prompt the student to monitor, evaluate, or adjust their own learning? (Most powerful for building independence.)
   - **Self level:** Does it comment on the student as a person rather than on the work? (No learning benefit. Remove or redirect.)

2. **The three feedback questions (Hattie & Timperley, 2007):**
   - **Feed up (Where am I going?):** Does the feedback reference the learning goal or success criteria?
   - **Feed back (How am I going?):** Does the feedback tell the student specifically what they did well or poorly *in relation to the goal*?
   - **Feed forward (Where to next?):** Does the feedback give a specific, actionable next step the student can take?

3. **Specificity check (Shute, 2008):** Is the feedback specific enough that the student knows exactly what to do differently? "Add more detail" is not specific. "In paragraph 3, you claim that militarism caused WWI but don't provide any evidence. Add a specific example of military build-up between 1900–1914 to support this claim" is specific.

4. **Threat check (Kluger & DeNisi, 1996):** Could this feedback be perceived as threatening to self-esteem, particularly for a struggling learner? If so, reframe to focus on the work, not the person.

5. **Actionability check:** Can the student act on this feedback independently? If the feedback requires knowledge or skills the student doesn't have, it's not actionable — it needs to be accompanied by instruction or a resource.

Return your output in this exact format:

## Feedback Analysis

### Original Feedback
[Reproduce the original feedback]

### Level Analysis
| Feedback Level | Present? | Examples from the text |
|---------------|----------|----------------------|
| Task | Yes/No | [Quote specific phrases] |
| Process | Yes/No | [Quote specific phrases] |
| Self-regulation | Yes/No | [Quote specific phrases] |
| Self | Yes/No | [Quote specific phrases] |

**Dominant level:** [Which level dominates and whether that's appropriate]

### Three Questions Check
- **Feed up (Where am I going?):** [Does the feedback reference the goal? Yes/No + detail]
- **Feed back (How am I going?):** [Does it say what was done well/poorly? Yes/No + detail]
- **Feed forward (Where to next?):** [Does it give a specific next step? Yes/No + detail]

### Specificity Rating
[Low / Medium / High] — [Explanation]

### Key Problems
[Numbered list of specific issues with the feedback]

### Rewritten Feedback
[The improved version — same approximate length, dramatically improved quality]

### What Changed and Why
[Bullet list explaining each change with reference to the research]

**Self-check before returning output:** Verify that (a) the rewritten feedback addresses all three feedback questions (feed up, feed back, feed forward), (b) it operates at process or self-regulation level, not just task level, (c) it is specific enough that the student knows exactly what to do, (d) it does not contain self-level comments disguised as encouragement, and (e) it is written in language the student can understand at their level.

出力例

シナリオ： フィードバック文：「よく頑張りました、Priya！とても良い点がいくつかありますね。分析を改善する必要があります。次回は、もっと深く掘り下げてみましょう。文章の書き方もすてきです。10点中6点です。」／課題の文脈：「10年生の英文学のエッセイ。第1幕でシェイクスピアがマクベス夫人の野心をどのように描いているかを分析する。学習目標：言語と構成を分析し、登場人物がどのように描かれているかを考察する。」

---

フィードバックの分析

元のフィードバック

「よく頑張りました、Priya！とても良い点がいくつかありますね。分析を改善する必要があります。次回は、もっと深く掘り下げてみましょう。文章の書き方もすてきです。10点中6点です。」

フィードバックのレベル

フィードバックのレベル	該当するか	テキスト中の例
課題	一部	「6/10」はスコアを示していますが、何が正しく、何が誤っていたのかについての情報はありません
プロセス	いいえ	Priyaが用いた戦略、方法、分析プロセスへの言及はありません
自己調整	いいえ	Priyaが自分の作業をモニタリングしたり評価したりするための促しはありません
自己	はい	「よく頑張りました、Priya！」／「あなたの文章のスタイルはすばらしいです」—どちらもPriyaの作業ではなく、人物としてのPriyaに言及しています

支配的なレベル： 自己レベルのフィードバックが支配的です。実質的なコメントの2つ（「よく頑張りました」と「あなたの文章のスタイルはすばらしいです」）は、Priyaの分析ではなく、Priya自身について述べています。課題レベルの要素はスコア（6/10）だけで、Priyaの作品が「中程度」であることは伝えますが、その理由や改善方法は伝えていません。自己レベルのフィードバックは学習にプラスの効果をもたらさず（Hattie & Timperley, 2007）、説明のないスコアは情報ではなく評価です（Wisniewski et al., 2020）。

3つの問いの確認

• フィードアップ（どこを目指しているのか？）： いいえ。このフィードバックは学習目標（言語と構成を通して、シェイクスピアがレディ・マクベスの野心をどのように描いているかを分析すること）に触れていません。Priyaは自分が何を目指していたのか分かりません。
• フィードバック（どのように進んでいるのか？）： ほとんどありません。「とてもよい点がいくつかあります」は曖昧です。どの点でしょうか？何がよかったのでしょうか？「分析に取り組む必要があります」は課題を指摘していますが、具体的ではありません。
• フィードフォワード（次に何をすればよいのか？）： いいえ。「次回はもっと深く掘り下げてみましょう」では具体的な行動につながりません。Priyaには、「もっと深く」とはどういう意味なのか、「より深い分析」がどのようなものなのか、またそれをどう行えばよいのかが分かりません。

具体性の評価

低い — このフィードバックには、Priyaが実際に書いた内容への具体的な言及がありません。同じコメント（「よく頑張りました。分析に取り組み、もっと深く掘り下げましょう」）は、どのトピックのどの生徒の作文にも書けてしまいます。これは質の低いフィードバックを示す強い兆候です（Shute, 2008）。

主な問題点

1. 「よく頑張りました」は自己レベルのフィードバックです。 Priyaの作業ではなく、Priyaの努力（個人的な資質）について述べています。何がよかったのか、なぜよかったのかについての情報はありません。Kluger & DeNisi（1996）は、自己に向けられたフィードバックによって、注意が課題から自我へと移ることを明らかにしました。

2. 「とてもよい点がいくつかあります」は、具体性のない課題レベルのフィードバックです。 どの点でしょうか？何が効果的だったのでしょうか？具体性がなければ、Priyaはうまくできたことを再現できません。

3. 「分析に取り組む必要があります。もっと深く掘り下げてみましょう」は、曖昧なフィードフォワードです。 これは中等教育で最もよく見られるフィードバックの失敗です。「もっと深く掘り下げる」という言葉は、深い分析がどのようなものか分からないYear 10の生徒には何の意味もありません。フィードバックが伸ばすよう求めているスキルを、Priyaがすでに身につけていることを前提としています。

4. 「あなたの文章のスタイルはすばらしいです」は、ジェンダーの側面を伴う自己レベルのフィードバックです。 Priyaが効果的に行った具体的な文章上の工夫を特定するのではなく、書き手としてのPriyaを褒めています。ジェンダーによるフィードバックの傾向に関する研究では、男子には内容に関する実質的なフィードバックがより多く与えられる一方、女子にはスタイルや体裁を褒める言葉がより多く与えられることが示されています。

5. 「6/10」はフィードバックではなく、評価です。 Butler（1988）は、コメントに成績が添えられると、生徒はコメントを完全に無視して成績に注目することを明らかにしました。このスコアによって、コメントが持ち得た形成的な価値が損なわれています。

書き直したフィードバック

Priyaさん、このエッセイから、関連性の高い引用を見つける力があることがわかります。第1幕第5場から、特にマクベス夫人の「ここで私の女らしさを奪ってください」という力強い根拠を選べています。

引用の選び方は効果的ですが、分析は表面的なところにとどまっています。たとえば、「これはマクベス夫人が野心的だということを示しています」と書いています。これは「何を」示しているかです。しかし、学習目標では、シェイクスピアが言葉を通じて「どのように」彼女の野心を描いているかを分析することが求められています。「ここで私の女らしさを奪ってください」という引用をもう一度見てみましょう。シェイクスピアが「女らしさを奪う」という表現を使ったのはなぜでしょうか。このセリフでは、野心とジェンダーの結びつきについて、何が伝わるでしょうか。力を得るために女性が女らしさを捨て去ることを望むのを聞いて、観客はどのような印象を受けるでしょうか。このエッセイには、そうした深い分析が必要です。

**次に取り組むこと：**このエッセイから、最も優れた引用を2つ選びましょう。それぞれについて、次の3つの文を書いてください。（1）その引用がマクベス夫人について何を示しているか、（2）シェイクスピアがその特定の言葉やイメージを選んだ理由、（3）それが観客に与える効果。次の授業に持ってきて、一緒に確認しましょう。

変更点とその理由

• 「よく頑張りました」「素敵な文体ですね」を削除 — 生徒本人に焦点を移してしまう、自己レベルのフィードバックです。代わりに、第1幕第5場から関連性の高い引用を選べたことを具体的に評価する、課題レベルの称賛に置き換えました（Hattie & Timperley、2007 — 正しくできた点についての課題レベルのフィードバック）。

• 「もっと深く考えて」を、具体的な「深さ」の例に置き換え — 書き直しでは、生徒自身が選んだ引用を取り上げ、「なぜこの言葉なのか」「どのような効果があるのか」といった問いを示すことで、分析における深さとは何かを具体的に説明しています。これは、結果だけでなく分析の「方略」に焦点を当てたプロセスレベルのフィードバックです（Hattie & Timperley、2007）。

• 具体的で実行可能な次のステップを追加 — 「引用を2つ選び、それぞれこの構成で3文を書く」とすることで、具体的に取り組める課題を示しています。生徒は自分で取り組めます。これは真のフィードフォワードです（Shute、2008）。

• 成績を削除 — Butler（1988）は、コメントと成績を併記するよりも、コメントのみのフィードバックのほうが学習を促すことを示しました。成績が注意を形成的な情報からそらすためです。成績を記録する必要がある場合は、別途、または後から伝えてください。

• 学習目標に言及 — 書き直しでは、「学習目標では『どのように』分析するかが求められています」と明示し、フィードバックと課題の目標を結びつけています。これにより、改善に向けた明確な基準を示しています（フィードアップ）。

---

既知の限界

1. 書き直しには、実際の生徒の課題を知る必要があります。 Priyaさんのエッセイを見ていないため、書き直したフィードバックでは元の文章で言及されている引用を使い、妥当な範囲で内容を推測しています。生徒の課題の要約が提供されれば、より正確に書き直せます。教師は、書き直しを完成版ではなく、応用して使うためのモデルとして扱ってください。

2. フィードバックの効果は、教師と生徒の関係に左右されます。 Wisniewski et al.（2020）は、同じ表現のフィードバックでも、信頼関係や教室でのフィードバックをめぐる文化によって受け止め方が異なることを示しました。この書き直しは、支援的な教室環境を前提としています。生徒がフィードバックに不安を感じる状況では、冒頭をさらに柔らかくする必要があるかもしれません。ただし、感情に配慮して具体性を下げると学習が損なわれることは、研究で明らかになっています。

3. このスキルは個別のフィードバックの質を分析しますが、組織的なフィードバックの問題には対処できません。 教師の採点負担が大きく、30人の生徒の各エッセイに3分しかかけられない場合、優れたフィードバックの知識があっても役に立ちません。採点量を減らす、クラス全体にフィードバックを行う、詳しく採点する対象を選ぶといった組織的な解決策は、このスキルの対象外ですが、実際には問題の根本にあることがよくあります。