mcpField
G
guardrail-scorecard

guardrail-scorecard

github.com/gtmagents测试与质量42865 次安装30 周前更新
代码仓库

关于 guardrail-scorecard

用于设定和监控实验护栏的技能,整理指标、阈值、告警、例外审批和复盘记录,支持发布与测试报告。

主要功能

  1. 01护栏指标清单
  2. 02警告与严重阈值
  3. 03告警和升级流程映射
  4. 04例外审批记录
  5. 05违规与缓解措施复盘

适用场景

  1. 01测试前设定发布标准
  2. 02按阈值监控进行中的实验
  3. 03测试后报告护栏状态

安装

复制下面的命令,在终端中运行。

$npx skills add https://github.com/gtmagents/gtm-agents --skill guardrail-scorecard

安装后在 Claude Code 中输入/guardrail-scorecard确认已加载。

详细介绍

护栏评分卡技能

适用场景

  • 在启动测试前设定不可妥协的指标(稳定性、流失率、延迟、合规性)。
  • 监控正在进行的实验,确保护栏保持在阈值范围内。
  • 在发布材料包和测试后报告中汇报护栏状态。

框架

  1. 指标清单 – 列出护栏指标、负责人、数据源和刷新频率。
  2. 阈值矩阵 – 按指标 / 用户画像 / 区域定义警告与严重阈值区间。
  3. 告警与升级 – 明确通知渠道、DRI 和决策时限。
  4. 例外处理 – 记录哪些情况下可以覆盖护栏,以及所需的审批。
  5. 复盘闭环 – 记录违规情况、缓解措施和规则更新,供未来测试参考。

模板

  • 护栏登记表(指标、阈值、负责人、告警渠道)。
  • 实时监控仪表盘布局。
  • 用于审批的例外备忘录结构。

提示

  • 将护栏与下游系统(计费、支持)关联,以捕捉二阶影响。
  • 根据季节性动态调整阈值,但要记录调整逻辑。
  • 搭配 launch-experiment,确保在切换标志前做好准备。

评论

支持 Markdown