关于 guardrail-scorecard
用于设定和监控实验护栏的技能,整理指标、阈值、告警、例外审批和复盘记录,支持发布与测试报告。
主要功能
- 01护栏指标清单
- 02警告与严重阈值
- 03告警和升级流程映射
- 04例外审批记录
- 05违规与缓解措施复盘
适用场景
- 01测试前设定发布标准
- 02按阈值监控进行中的实验
- 03测试后报告护栏状态
安装
复制下面的命令,在终端中运行。
$
npx skills add https:/ / github.com/ gtmagents/ gtm-agents --skill guardrail-scorecard安装后在 Claude Code 中输入/guardrail-scorecard确认已加载。
详细介绍
护栏评分卡技能
适用场景
- 在启动测试前设定不可妥协的指标(稳定性、流失率、延迟、合规性)。
- 监控正在进行的实验,确保护栏保持在阈值范围内。
- 在发布材料包和测试后报告中汇报护栏状态。
框架
- 指标清单 – 列出护栏指标、负责人、数据源和刷新频率。
- 阈值矩阵 – 按指标 / 用户画像 / 区域定义警告与严重阈值区间。
- 告警与升级 – 明确通知渠道、DRI 和决策时限。
- 例外处理 – 记录哪些情况下可以覆盖护栏,以及所需的审批。
- 复盘闭环 – 记录违规情况、缓解措施和规则更新,供未来测试参考。
模板
- 护栏登记表(指标、阈值、负责人、告警渠道)。
- 实时监控仪表盘布局。
- 用于审批的例外备忘录结构。
提示
- 将护栏与下游系统(计费、支持)关联,以捕捉二阶影响。
- 根据季节性动态调整阈值,但要记录调整逻辑。
- 搭配
launch-experiment,确保在切换标志前做好准备。
评论
支持 Markdown