关于 Oxylabs
Oxylabs 是用于调用 Oxylabs Web Scraper API 的 MCP 服务,面向开发者和研究工作流,提供 URL 抓取、Google 搜索结果及结构化 Amazon 商品数据。
主要功能
- 01抓取 URL 并返回 HTML 和状态码
- 02在无头浏览器中渲染 JavaScript 页面
- 03获取结构化 Google 自然搜索结果
- 04按 ASIN 获取 Amazon 商品详情
适用场景
- 01采集目标 URL 的页面 HTML
- 02收集指定地理位置的 Google 搜索结果
- 03查询 Amazon 商品价格、评分和库存情况
MCP 相关
向 MCP 客户端提供 Oxylabs 抓取、Google 搜索和 Amazon 商品工具。调用需要用户提供 Oxylabs 凭据;服务可本地运行或通过 Pipeworx 使用。
配置
远程服务无需本地安装。选择你使用的客户端,复制配置或使用一键安装。
https://gateway.pipeworx.io/oxylabs/mcpclaude mcp add --transport http pipeworx-io-oxylabs https://gateway.pipeworx.io/oxylabs/mcp{"mcpServers":{"pipeworx-io-oxylabs":{"type":"http","url":"https://gateway.pipeworx.io/oxylabs/mcp"}}}在 Cursor 中打开{"servers":{"pipeworx-io-oxylabs":{"type":"http","url":"https://gateway.pipeworx.io/oxylabs/mcp"}}}在 VS Code 中打开{"mcpServers":{"pipeworx-io-oxylabs":{"type":"http","url":"https://gateway.pipeworx.io/oxylabs/mcp"}}}{"mcpServers":{"pipeworx-io-oxylabs":{"serverUrl":"https://gateway.pipeworx.io/oxylabs/mcp"}}}命令在终端中运行;JSON 粘贴到对应客户端的 MCP 配置后重启。需要授权的服务会在首次连接时提示登录。
工具
详细介绍
mcp-oxylabs
Oxylabs MCP — Oxylabs Web Scraper API (oxylabs.io)
属于 Pipeworx — 一个将 AI Agent 连接到 1679+ 个实时数据源的 MCP 网关。
工具
| 工具 | 描述 |
|---|---|
oxylabs_scrape | 通过 Oxylabs Web Scraper API 抓取任意 URL(轮换代理、反机器人处理),并返回页面 HTML 及其上游状态码。设置 render_js:true,可先在无头浏览器中加载页面 — 适用于 JS 密集型网站。调用采用同步代理方式,可能需要 10-30 秒。BYOK:_apiKey 是 Oxylabs 控制面板中的 "username:password"。示例:oxylabs_scrape({ url: "https://example.com", _apiKey: "myuser:mypass" }) |
oxylabs_google_search | 通过 Oxylabs Web Scraper API 执行 Google 搜索,并返回结构化的自然搜索结果(排名、标题、url、描述)— 支持地理位置定位的 Google 结构化抓取。调用采用同步代理方式,可能需要 10-30 秒。BYOK:_apiKey 是 Oxylabs 控制面板中的 "username:password"。示例:oxylabs_google_search({ query: "best espresso machine", geo_location: "United States", _apiKey: "myuser:mypass" }) |
oxylabs_amazon_product | 通过 Oxylabs Web Scraper API 按 ASIN 获取结构化的 Amazon 商品数据 — Amazon 结构化抓取:标题、价格、货币、评分、评论数、库存/可用情况。调用采用同步代理方式,可能需要 10-30 秒。BYOK:_apiKey 是 Oxylabs 控制面板中的 "username:password"。示例:oxylabs_amazon_product({ asin: "B08N5WRWNW", domain: "com", _apiKey: "myuser:mypass" }) |
快速开始
添加到你的 MCP 客户端(Claude Desktop、Cursor、Windsurf 等):
{
"mcpServers": {
"oxylabs": {
"url": "https://gateway.pipeworx.io/oxylabs/mcp"
}
}
}
此端点实际提供的内容
https://gateway.pipeworx.io/oxylabs/mcp 上的 tools/list 会返回上表中的工具,以及 Pipeworx 共享元工具 — ask_pipeworx、
discover_tools、search_within、remember/recall 和网关范围内的其他工具。因此,你看到的工具数量会多于此表:目前,单个工具包端点会列出约 30 个共享工具,以及该工具包自己的工具。连接的 initialize 响应会说明其准确范围,并且是当天有效的权威信息。
这是有意为之,而非意外的多路复用。元工具让限定范围的连接能够通过 ask_pipeworx 跨整个目录进行路由,回答此工具包不涵盖的问题,无需你再添加第二个 MCP 服务。目前无法挂载不含这些工具的工具包端点;如果额外的架构所需上下文超过了路由带来的价值,请连接完整网关一次,而不是连接多个工具包端点。
或者连接完整的 Pipeworx 网关,直接列出每个工具包的工具,而不仅是当前工具包的工具:
{
"mcpServers": {
"pipeworx": {
"url": "https://gateway.pipeworx.io/mcp"
}
}
}
两个 URL 都连接到同一个网关和相同的 1679+ 个数据源。唯一的区别是,哪个工具包的工具会被直接列出;无论连接哪一个,ask_pipeworx 都能访问所有工具。
没有 MCP 客户端?通过 HTTP 调用
此工具包需要你提供自己的 API 密钥(_apiKey)— 我们不会为它提供 API 密钥,因此这里没有不带密钥即可运行的 curl 命令。查看任意工具:GET https://gateway.pipeworx.io/v1/tools/oxylabs_scrape。查找工具:使用 {"query":"..."} 向 https://gateway.pipeworx.io/v1/tools/search_packs 发送 POST 请求。
独立运行(无需网关账户)
此软件包也可作为本地 stdio MCP 服务运行 — 无需 Pipeworx 账户,也无需经过网关:
{
"mcpServers": {
"oxylabs": {
"command": "npx",
"args": ["-y", "@pipeworx/mcp-oxylabs"]
}
}
}
也可以直接运行,确认服务能正常启动:
npx -y @pipeworx/mcp-oxylabs
它通过 stdin/stdout 使用 MCP 通信,并为仅此工具包的工具响应 initialize/tools/list/tools/call — 不包含上方网关连接提供的任何共享元工具。相同的源码、相同的工具,不提供 ask_pipeworx 路由。
使用 ask_pipeworx
你可以用通俗的英语提问,而不是直接调用工具 — 此功能既适用于上方的工具包端点,也适用于完整网关:
ask_pipeworx({ question: "your question about Oxylabs data" })
网关会选择合适的工具并自动填充参数。
More
License
MIT
评论
一个开放协议,规定了 AI 应用如何以统一方式连接外部工具与数据源。客户端负责与模型对话,MCP 服务负责提供工具、资源和提示模板,两者通过标准消息通信,同一个服务可以被不同客户端复用。