Scrapewise

ScrapeWise MCP 服务

从 AI Agent 内部抓取、清理和匹配任意网站上的产品和价格数据。

ScrapeWise 运行托管的 Model Context Protocol 服务。将 MCP 客户端指向一个 URL，并添加 API 密钥即可。随后，Agent 就能从任意商店或 Amazon 读取产品和价格数据、查找本地商家、搜索 Google 和 Amazon、获取网页，以及读取保存在账户中的行。在 URL 后添加 ?toolsets=outcome,admin，还可以构建和运行爬虫。

• 端点： https://mcp.scrapewise.ai/mcp
• 包含设置工具的端点（用于构建爬虫）： https://mcp.scrapewise.ai/mcp?toolsets=outcome,admin
• 传输方式： Streamable HTTP
• 注册表名称： ai.scrapewise/scrapewise（官方 MCP 注册表）
• 身份验证： Authorization: Bearer <your API key>
• 文档： scrapewise.ai/mcp

此仓库包含该服务的连接清单和各客户端配置。服务本身托管在云端——无需在此安装或运行任何内容。

获取 API 密钥

在 scrapewise.ai 注册，然后前往 Settings → API Keys 并创建密钥。采用按使用量付费的定价方式。

连接

请替换以下每个代码片段中的 YOUR_SCRAPEWISE_API_KEY。

这些代码片段用于连接精简版数据工具。如需同时构建爬虫，请在相同位置使用以下地址：

https://mcp.scrapewise.ai/mcp?toolsets=outcome,admin

首次获取 MCP 密钥的账户现在访问裸地址时只会看到精简版工具列表。仍持有旧版 MCP 密钥的账户会保留所有工具。此选项会在会话启动时读取，因此更改后请重新连接。请准确拼写为 toolsets：拼错的开关会被忽略，且不会报错。

Claude Code

claude mcp add scrapewise --transport http https://mcp.scrapewise.ai/mcp \
  --header 'Authorization: Bearer YOUR_SCRAPEWISE_API_KEY'

包含设置工具。必须使用单引号：在 zsh 中，不加引号的 ? 会导致命令出错。

claude mcp add scrapewise --transport http 'https://mcp.scrapewise.ai/mcp?toolsets=outcome,admin' \
  --header 'Authorization: Bearer YOUR_SCRAPEWISE_API_KEY'

Claude Desktop

claude_desktop_config.json：

{
  "mcpServers": {
    "scrapewise": {
      "url": "https://mcp.scrapewise.ai/mcp",
      "headers": {
        "Authorization": "Bearer YOUR_SCRAPEWISE_API_KEY"
      }
    }
  }
}

Cursor

在 ~/.cursor/mcp.json 中使用相同的配置结构：

{
  "mcpServers": {
    "scrapewise": {
      "url": "https://mcp.scrapewise.ai/mcp",
      "headers": {
        "Authorization": "Bearer YOUR_SCRAPEWISE_API_KEY"
      }
    }
  }
}

VS Code

VS Code 与众不同：配置映射为 servers，而不是 mcpServers；远程服务必须通过 "type": "http" 指定传输方式。任一项配置错误，VS Code 都会跳过该条目，且不会告知你。

打开命令面板 → MCP: Open User Configuration，然后：

{
  "servers": {
    "scrapewise": {
      "type": "http",
      "url": "https://mcp.scrapewise.ai/mcp",
      "headers": {
        "Authorization": "Bearer YOUR_SCRAPEWISE_API_KEY"
      }
    }
  }
}

其他客户端

任何支持 Streamable HTTP 的客户端都可以使用。提供端点、Authorization 请求头以及名称 scrapewise 即可。

Agent 能做什么

区域	涵盖内容
产品	任意商店的产品行：名称、价格、货币、库存情况、品牌、SKU/GTIN/EAN、图片、描述、评分。Amazon 产品页面，可选包含每位卖家的价格、商品状况和配送信息
清理	整理已有数据行：添加欧元价格以及每千克／升／件价格、修剪文本、删除重复项。免费——不会抓取任何内容
查找	Google Maps 上的本地商家：名称、地址、电话、网站、评分（每次最多 20 个）
搜索	Google 网页、新闻和购物结果；Amazon 搜索结果；Google Trends 趋势数据
获取	一个公开网页的文本或 HTML
跟踪	长时间运行的任务：进度、数据行、取消
读取	账户中的分组及其中保存的数据行

使用设置工具（?toolsets=outcome,admin）

区域	涵盖内容
构建	预览页面、从 URL 或 cURL 命令创建爬虫、定义要提取的列
整理	按项目对爬虫分组、将产品 URL 添加到爬虫链接列表、共享分组
运行	运行单个爬虫、整个分组或临时 URL 列表；停止运行；读取运行错误
读取	提取样本数据行、完整结果集、运行历史记录和每次运行的列；导出分组
转换	分组级后处理规则——货币换算、数量标准化、单位价格
监控	计划任务、以基准竞争对手为参照的价格监控、数据质量和保留设置

工具

连接后，服务会公布自己的工具列表，因此这份列表仅供参考，并非权威来源。不同 API 密钥所能看到的内容可能有所不同，具体取决于你连接的地址以及密钥自身的访问级别。完整文档见 docs.scrapewise.ai。

默认工具（账户的第一个密钥）

get_product_data · get_amazon_product · clean_product_data · find_local_businesses · google_search · search_amazon · google_trends · fetch_page · get_results · cancel_job · scrapewise_get_scraper_group_list · scrapewise_get_scraper_data_group_client

每个付费工具都会注明价格，并接受 quote_only: true 参数；该参数会返回价格和钱包余额，而不会产生任何支出。clean_product_data 免费——它仅处理你已有的数据行，不会获取任何数据。只读密钥（LLM_READ）仅列出免费工具——get_results、clean_product_data 和两个读取工具；付费工具和构建功能需要完整访问权限密钥（LLM_FULL）。

设置工具（通过 ?toolsets=admin 或 ?toolsets=outcome,admin 列出）

构建爬虫

scrapewise_preview_scraper_from_url · scrapewise_preview_scraper_from_curl · scrapewise_preview_scraper_preview_rule · scrapewise_create_scraper · scrapewise_create_scraper_v2 · scrapewise_create_file_scraper · scrapewise_get_scraper · scrapewise_get_scraper_v2 · scrapewise_get_scraper_list · scrapewise_get_scraper_config_parameters · scrapewise_update_scraper_schema · scrapewise_update_scraper_fallback · scrapewise_update_file_scraper_file · scrapewise_delete_scraper · scrapewise_delete_scraper_preview

整理爬虫及其 URL

scrapewise_create_scraper_group · scrapewise_get_scraper_group_list · scrapewise_delete_scraper_group · scrapewise_delete_scraper_group_preview · scrapewise_create_scraper_site · scrapewise_get_scraper_site · scrapewise_get_scraper_site_links · scrapewise_update_scraper_site_from_source · scrapewise_delete_scraper_site · scrapewise_get_scraper_sitemaps · scrapewise_get_scraper_shared_group_list · scrapewise_list_scraper_shared_group_list · scrapewise_update_scraper_shared_group

运行

scrapewise_run_scraper · scrapewise_run_scraper_group · scrapewise_run_scraper_url_list · scrapewise_run_scraper_data_group · scrapewise_run_scraper_sitemaps_harvest · scrapewise_stop_scraper · scrapewise_stop_scraper_group · scrapewise_stop_scraper_shared_group · scrapewise_get_scraper_load_history · scrapewise_get_scraper_job_errors · scrapewise_get_scraper_load_site · scrapewise_get_scraper_load_site_content

读取数据

scrapewise_get_scraper_sample_data · scrapewise_get_scraper_data_group · scrapewise_get_scraper_data_group_client · scrapewise_get_scraper_data_group_categories · scrapewise_update_scraper_data_group_category · scrapewise_delete_scraper_data_group_category · scrapewise_delete_scraper_data_group_category_preview · scrapewise_get_run_columns · scrapewise_get_run_columns_batch · scrapewise_export_scraper_data_group · scrapewise_delete_scraper_data · scrapewise_delete_scraper_data_preview

清理和转换

scrapewise_get_scraper_group_post_process_rules · scrapewise_update_scraper_group_post_process_rules · scrapewise_update_scraper_group_currency · scrapewise_update_scraper_group_ai_control · scrapewise_update_scraper_group_data_quality · scrapewise_create_customer_schema · scrapewise_list_customer_schema · scrapewise_delete_customer_schema · scrapewise_delete_customer_schema_preview

监控价格

scrapewise_update_scraper_group_price_monitor · scrapewise_get_scraper_group_price_monitor_anchor_competitors · scrapewise_update_scraper_group_price_monitor_anchor_competitor · scrapewise_delete_scraper_group_price_monitor_anchor_competitor · scrapewise_list_scraper_group_price_monitor_picks · scrapewise_update_scraper_group_price_monitor_pick · scrapewise_delete_scraper_group_price_monitor_pick

安排计划和保留数据

scrapewise_update_scraper_group_schedule · scrapewise_update_scraper_group_start_type · scrapewise_update_scraper_group_retention · scrapewise_update_scraper_retention

数据丰富和 SEO 字段

scrapewise_get_enrichment · scrapewise_delete_enrichment · scrapewise_list_enrichable_scrapers · scrapewise_get_scraper_seo_fields · scrapewise_search_scraper_seo_fields

账户

scrapewise_create_api_key · scrapewise_list_api_keys · scrapewise_delete_api_key

清单

server.json 是镜像文件。权威版本位于 https://scrapewise.ai/server.json，由 ScrapeWise 网站仓库提供，并通过其测试套件验证。如果两者不一致，以托管版本为准。

ai.scrapewise/* 命名空间的所有权由发布在 https://scrapewise.ai/.well-known/mcp-registry-auth 的 Ed25519 公钥证明。

支持

• 文档：docs.scrapewise.ai
• 电子邮件：[email protected]

许可证

MIT — 参见 LICENSE。仅涵盖此仓库的内容，不涵盖托管服务。