关于 Nerf Watch
Nerf Watch 是托管的只读 MCP 服务,提供 Claude 和 GPT 模型在公开代码评分测试集上的分数与历史记录。结果用于查看该测试集内的趋势,并不证明模型提供方更改了模型。
主要功能
- 01获取最新公开分数与历史运行
- 02查看分数变化、基线和趋势
- 03按模型 ID 查询保留历史
- 04提供套件版本及时间序列
适用场景
- 01检查模型在该测试集上的近期分数
- 02追踪某模型跨运行的历史变化
MCP 相关
该服务通过 Streamable HTTP 向 MCP 客户端提供只读分数和历史工具,无需 API 密钥或登录。
配置
远程服务无需本地安装。选择你使用的客户端,复制配置或使用一键安装。
https://tokenusage.dev/mcp/nerfwatchclaude mcp add --transport http dev-tokenusage-nerfwatch https://tokenusage.dev/mcp/nerfwatch{"mcpServers":{"dev-tokenusage-nerfwatch":{"type":"http","url":"https://tokenusage.dev/mcp/nerfwatch"}}}在 Cursor 中打开{"servers":{"dev-tokenusage-nerfwatch":{"type":"http","url":"https://tokenusage.dev/mcp/nerfwatch"}}}在 VS Code 中打开{"mcpServers":{"dev-tokenusage-nerfwatch":{"type":"http","url":"https://tokenusage.dev/mcp/nerfwatch"}}}{"mcpServers":{"dev-tokenusage-nerfwatch":{"serverUrl":"https://tokenusage.dev/mcp/nerfwatch"}}}命令在终端中运行;JSON 粘贴到对应客户端的 MCP 配置后重启。需要授权的服务会在首次连接时提示登录。
工具
详细介绍
Nerf Watch MCP 服务
一个托管的只读 MCP 服务,提供 Nerf Watch 背后的公开评分和历史记录。
分数较低表示在此测试套件中的分数较低,并不能证明服务提供商更改了模型。
运行结果存在噪声,服务提供商的默认设置、端点或运行器本身都可能发生变化。
Data: tokenusage.dev 链接到 https://tokenusage.dev/nerfwatch。
- 端点:
https://tokenusage.dev/mcp/nerfwatch(Streamable HTTP) - 无需 API 密钥、账号或登录
- 只读公开评分数据
- 两个工具共享每个服务实例的一个 300 秒读取缓存
此目录包含客户端文档和 Registry 元数据。托管实现的源代码不在此仓库中。
工具
| 工具 | 参数 | 结果 |
|---|---|---|
get_nerfwatch_scores | 无 | 最新公开评分、之前的运行记录、变化、基线和趋势;包含模型 ID。 |
get_nerfwatch_history | 必需的 model ID,来自 get_nerfwatch_scores | 该模型保留的历史记录,按时间从早到晚排列,并注明每个数据点的套件版本。 |
缺失日期表示数据缺失,而不是零。分数和变化均四舍五入到小数点后两位。 比较仅在同一套件版本内进行。保留期限和基线设置以响应内容为准。不会返回证据答案、评分器检查行和测试问题。
安装
Claude Code:
claude mcp add --transport http nerfwatch https://tokenusage.dev/mcp/nerfwatch
Codex:
codex mcp add nerfwatch --url https://tokenusage.dev/mcp/nerfwatch
若要在 Claude Code 项目范围内使用,请将以下内容添加到 .mcp.json。其他接受此 HTTP mcpServers 格式的客户端也可以使用相同条目:
{
"mcpServers": {
"nerfwatch": {
"type": "http",
"url": "https://tokenusage.dev/mcp/nerfwatch"
}
}
}
发现
- Registry 名称:
dev.tokenusage/nerfwatch - 清单:server.json
- 服务卡片:https://tokenusage.dev/mcp/nerfwatch/server-card
- AI 目录:https://tokenusage.dev/.well-known/ai-catalog.json
- 字段、缓存和访问权限:https://tokenusage.dev/developers
独立的 Codex 重置服务仍位于 https://tokenusage.dev/mcp。
署名和条款
向他人展示此数据时,请在同一屏幕或同一条消息中显示链接到
https://tokenusage.dev/nerfwatch 的 Data: tokenusage.dev。
个人使用无需显示署名。中继服务会保留 source URL,并传递此署名条件。
请勿以快于每五分钟一次的频率轮询,并保留上述评分说明。
条款:https://tokenusage.dev/terms
隐私:https://tokenusage.dev/privacy
问题与更正:https://tokenusage.dev/contact
非官方;与 OpenAI 或 Anthropic 无关联。
评论
一个开放协议,规定了 AI 应用如何以统一方式连接外部工具与数据源。客户端负责与模型对话,MCP 服务负责提供工具、资源和提示模板,两者通过标准消息通信,同一个服务可以被不同客户端复用。