mcpField
O
openai-playwright

openai-playwright

github.com/trailofbitsAgent 工作流52278 次安装15 周前更新
代码仓库

关于 openai-playwright

openai-playwright 是用于通过 Playwright CLI 在终端驱动真实浏览器的 Agent 技能，提供基于页面快照和元素引用的操作流程，涵盖表单、多标签页和追踪。

主要功能

  1. 01通过终端控制浏览器
  2. 02基于快照获取元素引用
  3. 03填写并提交表单
  4. 04操作多个标签页
  5. 05捕获追踪与页面产物

适用场景

  1. 01由 Agent 自动执行浏览器操作
  2. 02填写并提交网页表单
  3. 03使用追踪调试界面流程

安装

复制下面的命令，在终端中运行。

$npx skills add https://github.com/trailofbits/skills-curated --skill openai-playwright

安装后在 Claude Code 中输入/openai-playwright确认已加载。

包含的文件

除 SKILL.md 外，安装时一起下载的参考资料和脚本。

references/
cli.md
workflows.md
scripts/
playwright_cli.sh

详细介绍

Playwright CLI 技能

使用 playwright-cli 从终端驱动真实浏览器。优先使用随附的包装脚本，这样即使未全局安装 CLI，也能正常运行。 将此技能视为以 CLI 为先的自动化方案。除非用户明确要求测试文件，否则不要转而使用 @playwright/test。

前置条件检查（必需）

在提出命令之前，检查是否可用 npx（包装脚本依赖它）：

command -v npx >/dev/null 2>&1

如果不可用，请暂停并要求用户安装 Node.js/npm（其中提供 npx）。逐字提供以下步骤：

# Verify Node/npm are installed
node --version
npm --version

# If missing, install Node.js/npm, then:
npm install -g @playwright/cli@latest
playwright-cli --help

确认存在 npx 后，使用包装脚本继续操作。全局安装 playwright-cli 是可选的。

脚本和参考资料位于 {baseDir}/ 下。

快速开始

使用包装脚本：

"$PWCLI" open https://playwright.dev --headed
"$PWCLI" snapshot
"$PWCLI" click e15
"$PWCLI" type "Playwright"
"$PWCLI" press Enter
"$PWCLI" screenshot

如果用户更倾向于全局安装，也可以使用：

npm install -g @playwright/cli@latest
playwright-cli --help

核心工作流

  1. 打开页面。
  2. 获取快照，以得到稳定的元素引用。
  3. 使用最新快照中的引用进行交互。
  4. 导航或 DOM 发生重大变化后，重新获取快照。
  5. 在适当时捕获产物（截图、PDF、跟踪记录）。

最简循环：

"$PWCLI" open https://example.com
"$PWCLI" snapshot
"$PWCLI" click e3
"$PWCLI" snapshot

何时重新获取快照

在以下情况后重新获取快照：

  • 导航
  • 点击会显著改变 UI 的元素
  • 打开/关闭模态框或菜单
  • 切换标签页

引用可能会失效。如果命令因引用缺失而失败，请重新获取快照。

推荐模式

填写并提交表单
"$PWCLI" open https://example.com/form
"$PWCLI" snapshot
"$PWCLI" fill e1 "[email protected]"
"$PWCLI" fill e2 "password123"
"$PWCLI" click e3
"$PWCLI" snapshot
使用跟踪记录调试 UI 流程
"$PWCLI" open https://example.com --headed
"$PWCLI" tracing-start
# ...interactions...
"$PWCLI" tracing-stop
多标签页操作
"$PWCLI" tab-new https://example.com
"$PWCLI" tab-list
"$PWCLI" tab-select 0
"$PWCLI" snapshot

包装脚本

包装脚本使用 npx --package @playwright/cli playwright-cli，因此无需全局安装即可运行 CLI：

"$PWCLI" --help

除非仓库已统一采用全局安装，否则优先使用包装脚本。

参考资料

仅打开所需内容：

  • CLI 命令参考：references/cli.md
  • 实用工作流和故障排查：references/workflows.md

安全措施

  • 在引用 e12 这类元素 ID 之前，务必先获取快照。
  • 如果引用似乎已失效，请重新获取快照。
  • 除非必要，否则优先使用明确的命令，而非 eval 和 run-code。
  • 如果没有最新快照，请使用 eX 这类占位引用并说明原因；不要用 run-code 绕过引用。
  • 在视觉检查有帮助时，使用 --headed。
  • 在此仓库中捕获产物时，请使用 output/playwright/，避免新建顶层产物目录。
  • 默认使用 CLI 命令和工作流，而非 Playwright 测试规格文件。

适用场景

不适用场景

评论

支持 Markdown