score-optimizer について
記事のスコアリングシステムを調整するスキルで、バズ評価のプロンプトやルールを調整するコンテンツチーム向けです。サンプル記事を一括採点し、ラベル付きデータと照合して評価します。通常は記事本文ではなく採点プロンプトを変更します。
主な機能
- 01記事採点プロンプトの調整
- 02サンプル記事の一括採点
- 03ラベル付きデータとの精度評価
- 04MAE・Spearman などの指標比較
- 05評価スクリプトの変更を原則回避
活用シーン
- 01バズ評価プロンプトの改善
- 02viral score または composite score の調整
- 03サンプル記事の採点実験
- 04採点ルールとラベル結果の照合
インストール
コマンドをコピーしてターミナルで実行します。
$
npx skills add https:/ / github.com/ xiaomoboy/ claude-writing-skills --skill score-optimizerインストール後、Claude Code で/score-optimizerを入力して読み込まれたか確認します。
同梱ファイル
SKILL.md と一緒にインストールされる参考資料やスクリプト。
README.mdassets/articles/labels.example.jsonassets/articles/samples/README.mdreferences/score_program.mdscore_prompt.mdscripts/evaluate.pygenerate_score_chart.pyrun_scoring.py詳細
プロジェクトの README よりScore Optimizer
这个 skill 只负责一件事:优化文章评分系统本身。
它适合做的是:
- 调整文章爆款评分 Prompt
- 批量给样本文集打分
- 对照标注数据评估评分准确度
- 研究评分维度、权重、few-shot 示例是否更合理
它不负责:
- 直接改文章正文
- 平台改写
- 发布包装
Working Scope
适用场景:
- 用户说“优化文章评分 prompt”
- 用户说“让这个爆款评分系统更准”
- 用户说“跑一轮样本文集评分实验”
- 用户说“校准 viral score / composite score 的打分规则”
不适用场景:
- 用户说“直接把这篇文章改高分”
- 用户说“按这个评分器去优化文章内容”
后者应改用 article-optimizer。
Required Reads
开始前先读:
需要看实现时再读:
样本文集位置(用户自己提供,本 skill 不带样本):
assets/articles/samples/—— 把你自己标注过的 .md 文章放进来,然后cp labels.example.json labels.json填上你的评分。详见 assets/articles/samples/README.md
Workflow
- 先确认当前任务是在优化评分器,不是在改文章。
- 读取
references/score_program.md,按它的实验约束执行。 - 默认只改
references/score_prompt.md,不要动评估脚本。 - 运行批量评分脚本,再运行评估脚本。
- 比较
composite_score、mae、spearman、classification。 - 记录结果,决定保留还是回滚。
Commands
在 skill 根目录执行:
python3 scripts/run_scoring.py > scoring.log 2>&1
python3 scripts/evaluate.py > eval.log 2>&1
grep "^composite_score:\|^mae:\|^spearman:\|^classification:" eval.log
如果需要图表:
python3 scripts/generate_score_chart.py
Guardrails
- 默认不要改
scripts/evaluate.py - 默认不要改
scripts/run_scoring.py - 默认不要安装新依赖
- 如果只是想提高某一篇文章分数,不要用这个 skill
コメント
Markdown 対応