superpowers-lab

Superpowers 实验室

适用场景

• 你想在采用上游 Superpowers 实验室中的实验性工作流之前对其进行评估。
• 你需要对比基线行为与拟议技能，并确保比较过程可复现。

工作流

1. 从上游实验室中选择一项实验。使用前阅读其说明、状态、先决条件和许可证；此条目不包含实验室中的实验。
2. 定义一个有代表性的简单任务、成功标准、时间／成本限制，以及每次运行可访问的文件和工具。使用一次性测试夹具，不使用生产凭据。
3. 记录基线 Agent／工具配置，并在不使用实验性技能的情况下运行任务。收集输出、观察到的失败和验证结果。
4. 在加载实验之前，检查实验的完整内容和所有命令。在相同权限和验收标准下，于隔离工作区中使用实验性技能运行相同任务。
5. 比较实际输出和失败情况。区分观察到的改进与主观偏好；将模型／工具设置的变更记录为混杂因素。
6. 决定保留、修改还是拒绝该实验。将生产环境的采用与实验室运行分开；若建议采用，还需制定回滚／移除计划。

示例

在一次性修复缺陷的测试夹具上，将一项实验室工作流与我们的基线进行比较。报告测试和失败模式，但不要全局安装该工作流。

限制

• 实验性指导不构成生产环境保证。未经受控运行，不要推断其兼容性或改进效果。
• 原始实验及其测试夹具属于外部先决条件；如果材料不可用，请予以说明。
• 不要执行未经审查的脚本、扩大权限或在实验中使用私有生产数据。