关于 foundrynet-scrape
foundrynet-scrape 是面向 AI Agent、受 x402 支付门控的网页提取服务。它可返回清理后的文本、Markdown 或 JSON 内容,也可作为 MCP 服务使用。
主要功能
- 01以文本、Markdown 或 JSON 提取页面
- 02批量提取,最多处理 20 个 URL
- 03移除网页模板内容
- 04使用 Mozilla Readability、Turndown 和 Cheerio
适用场景
- 01提取文章内容用于研究
- 02批量获取多个 URL 的内容
- 03为后续 Agent 处理准备网页内容
MCP 相关
通过 Streamable HTTP MCP 端点提供 `extract` 和 `extract_batch` 工具。使用 `fnet_` 密钥可绕过付款;否则服务会返回 x402 付款要求响应。
配置
远程服务无需本地安装。选择你使用的客户端,复制配置或使用一键安装。
https://foundrynet-scrape-production.up.railway.app/mcpclaude mcp add --transport http foundrynet-foundrynet-scrape https://foundrynet-scrape-production.up.railway.app/mcp{"mcpServers":{"foundrynet-foundrynet-scrape":{"type":"http","url":"https://foundrynet-scrape-production.up.railway.app/mcp"}}}在 Cursor 中打开{"servers":{"foundrynet-foundrynet-scrape":{"type":"http","url":"https://foundrynet-scrape-production.up.railway.app/mcp"}}}在 VS Code 中打开{"mcpServers":{"foundrynet-foundrynet-scrape":{"type":"http","url":"https://foundrynet-scrape-production.up.railway.app/mcp"}}}{"mcpServers":{"foundrynet-foundrynet-scrape":{"serverUrl":"https://foundrynet-scrape-production.up.railway.app/mcp"}}}命令在终端中运行;JSON 粘贴到对应客户端的 MCP 配置后重启。需要授权的服务会在首次连接时提示登录。
工具
详细介绍
FoundryNet Scrape
面向 AI Agent 的 x402 门控网页提取网关。抓取任意页面并获取干净内容——文本、Markdown 或结构化 JSON。无需 API 密钥,无需账户。
FoundryNet Data Network 的一部分:https://foundrynet.io?utm_source=github&utm_medium=readme&utm_campaign=foundrynet-scrape。通过 USDC (x402) 按次付费,或使用 fnet_ Forge 密钥绕过支付。也作为 MCP 服务提供,可用于 Smithery/Glama/Claude。
工具 / 端点
| 工具 / 路由 | 价格 | 说明 |
|---|---|---|
extract — POST /v1/extract | $0.01 | {url, format?: "text"|"markdown"|"json"} → 提取的主要内容 |
extract_batch — POST /v1/extract/batch | $0.008 | {urls: string[]}(最多 20 个)→ 提取内容数组(批量折扣) |
后端:Mozilla Readability(文章提取)+ Turndown(HTML→markdown)+ Cheerio(备用方案)——均免费,无需 API 密钥。自动剔除无关内容(脚本、导航、广告)。
MCP
Streamable HTTP 端点:https://foundrynet-scrape-production.up.railway.app/mcp
claude mcp add --transport http foundrynet-scrape https://foundrynet-scrape-production.up.railway.app/mcp
无需认证即可查看工具列表(可发现)。将 fnet_ 密钥作为 api_key(或使用 Authorization: Bearer)传入即可绕过付费;否则工具会返回 x402 payment_required 对象。
付费(x402)
Solana 主网上的标准 x402 v2 USDC 支付。发现方式:GET /x402、GET /.well-known/x402,以及通过 GET /x402/{route} 获取各路由的 402 信息。已通过 402 Index 验证。
使用频率最高的工具类别——每个研究、内容和数据 Agent 都需要读取网页。
评论
一个开放协议,规定了 AI 应用如何以统一方式连接外部工具与数据源。客户端负责与模型对话,MCP 服务负责提供工具、资源和提示模板,两者通过标准消息通信,同一个服务可以被不同客户端复用。