mcpField
F
foundrynet-scrape

foundrynet-scrape

远程服务
github.com/FoundryNet浏览器自动化011 周前更新
代码仓库

关于 foundrynet-scrape

foundrynet-scrape 是面向 AI Agent、受 x402 支付门控的网页提取服务。它可返回清理后的文本、Markdown 或 JSON 内容,也可作为 MCP 服务使用。

主要功能

  1. 01以文本、Markdown 或 JSON 提取页面
  2. 02批量提取,最多处理 20 个 URL
  3. 03移除网页模板内容
  4. 04使用 Mozilla Readability、Turndown 和 Cheerio

适用场景

  1. 01提取文章内容用于研究
  2. 02批量获取多个 URL 的内容
  3. 03为后续 Agent 处理准备网页内容

MCP 相关

通过 Streamable HTTP MCP 端点提供 `extract` 和 `extract_batch` 工具。使用 `fnet_` 密钥可绕过付款;否则服务会返回 x402 付款要求响应。

配置

远程服务无需本地安装。选择你使用的客户端,复制配置或使用一键安装。

服务地址https://foundrynet-scrape-production.up.railway.app/mcp
一键复制安装命令
Claude CodeTerminal
Cursor.cursor/mcp.json
VS Code.vscode/mcp.json
Claude Desktopclaude_desktop_config.json
Windsurf~/.codeium/windsurf/mcp_config.json

命令在终端中运行;JSON 粘贴到对应客户端的 MCP 配置后重启。需要授权的服务会在首次连接时提示登录。

工具

详细介绍

FoundryNet Scrape

面向 AI Agent 的 x402 门控网页提取网关。抓取任意页面并获取干净内容——文本、Markdown 或结构化 JSON。无需 API 密钥,无需账户。

FoundryNet Data Network 的一部分:https://foundrynet.io?utm_source=github&utm_medium=readme&utm_campaign=foundrynet-scrape。通过 USDC (x402) 按次付费,或使用 fnet_ Forge 密钥绕过支付。也作为 MCP 服务提供,可用于 Smithery/Glama/Claude。

工具 / 端点

工具 / 路由价格说明
extract — POST /v1/extract$0.01{url, format?: "text"|"markdown"|"json"} → 提取的主要内容
extract_batch — POST /v1/extract/batch$0.008{urls: string[]}(最多 20 个)→ 提取内容数组(批量折扣)

后端:Mozilla Readability(文章提取)+ Turndown(HTML→markdown)+ Cheerio(备用方案)——均免费,无需 API 密钥。自动剔除无关内容(脚本、导航、广告)。

MCP

Streamable HTTP 端点:https://foundrynet-scrape-production.up.railway.app/mcp

claude mcp add --transport http foundrynet-scrape https://foundrynet-scrape-production.up.railway.app/mcp

无需认证即可查看工具列表(可发现)。将 fnet_ 密钥作为 api_key(或使用 Authorization: Bearer)传入即可绕过付费;否则工具会返回 x402 payment_required 对象。

付费(x402)

Solana 主网上的标准 x402 v2 USDC 支付。发现方式:GET /x402、GET /.well-known/x402,以及通过 GET /x402/{route} 获取各路由的 402 信息。已通过 402 Index 验证。

使用频率最高的工具类别——每个研究、内容和数据 Agent 都需要读取网页。

评论

支持 Markdown

第一次接触 MCP?

从协议是什么,到在客户端里装上第一个服务,这几条回答覆盖了大多数入门问题。

一个开放协议,规定了 AI 应用如何以统一方式连接外部工具与数据源。客户端负责与模型对话,MCP 服务负责提供工具、资源和提示模板,两者通过标准消息通信,同一个服务可以被不同客户端复用。