关于 Firecrawl
Firecrawl 是通过 Firecrawl API 提供网页抓取、站点映射和搜索的 MCP 服务,面向需要以结构化、适合 LLM 处理的形式获取网页内容的客户端。
主要功能
- 01将网页抓取为干净的 Markdown
- 02返回 HTML、原始 HTML 或链接
- 03映射发现的站点 URL
- 04提供带排名的网页搜索结果
适用场景
- 01提取网页的主要内容
- 02发现网站中的页面
- 03查找与查询相关的网页
MCP 相关
向 MCP 客户端提供 Firecrawl 抓取、映射和搜索工具,可通过 Pipeworx 网关使用,也可作为独立的 stdio MCP 服务运行。
配置
远程服务无需本地安装。选择你使用的客户端,复制配置或使用一键安装。
https://gateway.pipeworx.io/firecrawl/mcpclaude mcp add --transport http pipeworx-io-firecrawl https://gateway.pipeworx.io/firecrawl/mcp{"mcpServers":{"pipeworx-io-firecrawl":{"type":"http","url":"https://gateway.pipeworx.io/firecrawl/mcp"}}}在 Cursor 中打开{"servers":{"pipeworx-io-firecrawl":{"type":"http","url":"https://gateway.pipeworx.io/firecrawl/mcp"}}}在 VS Code 中打开{"mcpServers":{"pipeworx-io-firecrawl":{"type":"http","url":"https://gateway.pipeworx.io/firecrawl/mcp"}}}{"mcpServers":{"pipeworx-io-firecrawl":{"serverUrl":"https://gateway.pipeworx.io/firecrawl/mcp"}}}命令在终端中运行;JSON 粘贴到对应客户端的 MCP 配置后重启。需要授权的服务会在首次连接时提示登录。
工具
44| 参数 | 类型 | 必填 | 说明 |
|---|---|---|---|
| q | string | 否 | question 的别名。 |
| ask | string | 否 | question 的别名。 |
| text | string | 否 | question 的别名。 |
| input | string | 否 | question 的别名。 |
| packs | array | 否 | 可选。将路由限制为这些包的 slug(例如 ["sec-form-d","sec-13f"]),路由器随后只会从这些包中的工具进行选择。省略则使用默认的完整目录路由。Slug 可从 list_packs / search_packs / https://pipeworx.io/directory 获取;未列出或未知的 slug 会被忽略,并在 _meta.pack_scope.ignored 中列出。如果没有任何 slug 能匹配问题,则会在整个目录中路由,并设置 _meta.pack_scope.full_catalog:true(绝不会返回空答案)。 |
| query | string | 否 | question 的别名。 |
| prompt | string | 否 | question 的别名。 |
| message | string | 否 | question 的别名。 |
| question | string | 是 | 用自然语言表达的问题或请求。支持 query、q、prompt、text、input、ask、message 作为别名。 |
详细介绍
mcp-firecrawl
Firecrawl MCP — 封装 Firecrawl API(firecrawl.dev),用于网页抓取、爬取和搜索,并针对大模型使用进行了优化。
这是 Pipeworx 的一部分 — 一个将 AI Agent 连接到 1879+ 个实时数据源的 MCP 网关。这是独立的非官方集成,与上游提供商无关联,未获其认可,也未由其发布。
工具
| 工具 | 描述 |
|---|---|
scrape | 使用 Firecrawl 的 JS 渲染引擎抓取单个 URL,并返回干净的 Markdown(最多 100,000 个字符)、页面标题和描述。默认移除导航和模板内容(only_main_content=true)。支持的输出格式:markdown、html、rawHtml、links。 |
map | 爬取网站并返回所有发现的 URL(最多 5,000 个)。可选择按搜索词筛选,以相关性对发现的链接排序。返回 {url, count, links[]}。 |
search | 通过 Firecrawl 执行网页搜索,并返回包含 URL、标题和描述摘要的排序结果。接受查询字符串和可选的结果数限制(默认 5,最多 20)。返回 {query, results[{url, title, description}]}。 |
快速开始
添加到你的 MCP 客户端(Claude Desktop、Cursor、Windsurf 等):
{
"mcpServers": {
"firecrawl": {
"url": "https://gateway.pipeworx.io/firecrawl/mcp"
}
}
}
此端点实际提供的内容
https://gateway.pipeworx.io/firecrawl/mcp 上的 tools/list 会返回上表中的工具,以及 Pipeworx 的共享元工具 — ask_pipeworx、
discover_tools、search_within、remember/recall,还有网关范围内的其他工具。因此,你看到的工具数量会多于此表所列:目前,单个工具包端点除了自身工具外,还会列出约 30 个共享工具。连接的 initialize 响应会说明其确切范围,是当天最权威的信息。
这是有意为之,并非意外的多路复用。元工具让范围受限的连接能够回答此工具包未涵盖的问题 — 通过 ask_pipeworx 跨整个目录路由 — 无需你添加第二个 MCP 服务。目前无法在不包含这些工具的情况下挂载工具包端点;如果额外的架构定义占用的上下文比路由功能带来的价值更高,请连接一次完整网关,而不是连接多个工具包端点。
或者连接完整的 Pipeworx 网关,直接获取所有工具包列出的工具,而不只是此工具包的工具:
{
"mcpServers": {
"pipeworx": {
"url": "https://gateway.pipeworx.io/mcp"
}
}
}
两个 URL 都会连接到同一个网关和相同的 1879+ 个数据源。唯一的区别在于,哪些工具包的工具会被直接列出;无论连接哪一个,ask_pipeworx 都可以访问所有工具。
没有 MCP 客户端?通过 HTTP 调用
我们的 Firecrawl 密钥仅供付费账户使用,因此匿名调用 POST https://gateway.pipeworx.io/v1/tools/scrape 时,需要在参数旁通过 _apiKey 传入你自己的密钥。查看任意工具:GET https://gateway.pipeworx.io/v1/tools/scrape。查找工具:使用 {"query":"..."} 调用 POST https://gateway.pipeworx.io/v1/tools/search_packs。
独立运行(无需网关账户)
此软件包也可作为本地 stdio MCP 服务运行 — 无需 Pipeworx 账户,也无需经过网关往返:
{
"mcpServers": {
"firecrawl": {
"command": "npx",
"args": ["-y", "@pipeworx/mcp-firecrawl"]
}
}
}
或者直接运行,确认它可以启动:
npx -y @pipeworx/mcp-firecrawl
它通过 stdin/stdout 使用 MCP,并针对仅此工具包的工具响应 initialize/tools/list/tools/call — 不包含上述网关连接提供的任何共享元工具。使用相同的源代码和工具,但不支持 ask_pipeworx 路由。
使用 ask_pipeworx
你可以用通俗英语提问,而不是直接调用工具 — 此功能既适用于上面的工具包端点,也适用于完整网关:
ask_pipeworx({ question: "your question about Firecrawl data" })
网关会选择合适的工具并自动填写参数。
更多信息
许可证
MIT
评论
一个开放协议,规定了 AI 应用如何以统一方式连接外部工具与数据源。客户端负责与模型对话,MCP 服务负责提供工具、资源和提示模板,两者通过标准消息通信,同一个服务可以被不同客户端复用。