smart-crawler

Name: smart-crawler
Author: shulex-voc

远程服务

github.com/shulex-voc商业与营销020 周前更新

代码仓库

关于 smart-crawler

smart-crawler 是托管式 MCP 服务，为 AI Agent 提供电商竞品情报、消费者评价分析、Amazon ASIN 分析及 Reddit 社区增长方案。它还支持 Google Shopping 市场分析和按需 URL 抓取。

主要功能

01按品牌、国家、关键词或价格搜索竞品
02分析 Trustpilot、Reviews.io 和 Google Maps 评价
03生成 Amazon ASIN 评价与 VOC 报告
04查看 Google Shopping 商家份额排名
05抓取单个 URL 并提供短期 Agent 记忆
06生成 Reddit 子版块增长方案

适用场景

01比较不同市场的竞品商品
02汇总消费者评价中的痛点
03分析 Amazon 商品反馈并改进商品页
04规划 Reddit 子版块的增长策略

MCP 相关

该托管 MCP 服务通过 streamable-http 向 MCP 客户端提供电商分析、评价分析、URL 抓取和 Reddit 研究工具，并使用 Bearer API 密钥进行认证。

配置

远程服务无需本地安装。选择你使用的客户端，复制配置或使用一键安装。

服务地址https://smartcrawler.io/mcp/

一键复制安装命令

Claude CodeTerminalclaude mcp add --transport http shulex-voc-smart-crawler https://smartcrawler.io/mcp/

Cursor.cursor/mcp.json{"mcpServers":{"shulex-voc-smart-crawler":{"type":"http","url":"https://smartcrawler.io/mcp/"}}}在 Cursor 中打开

VS Code.vscode/mcp.json{"servers":{"shulex-voc-smart-crawler":{"type":"http","url":"https://smartcrawler.io/mcp/"}}}在 VS Code 中打开

Claude Desktopclaude_desktop_config.json{"mcpServers":{"shulex-voc-smart-crawler":{"type":"http","url":"https://smartcrawler.io/mcp/"}}}

Windsurf~/.codeium/windsurf/mcp_config.json{"mcpServers":{"shulex-voc-smart-crawler":{"serverUrl":"https://smartcrawler.io/mcp/"}}}

命令在终端中运行；JSON 粘贴到对应客户端的 MCP 配置后重启。需要授权的服务会在首次连接时提示登录。

全部服务地址

Streamable HTTPhttps://smartcrawler.io/mcp/需要授权

工具

详细介绍

smart-crawler MCP

电商竞争对手情报、VOC 评论情感分析、Amazon ASIN 分析、Google Shopping 市场概况、按需 URL 抓取，以及 Reddit 子版块增长攻略——通过托管的 Model Context Protocol 服务提供给 AI Agent。

端点： https://smartcrawler.io/mcp/（streamable-http）
认证： Authorization: Bearer sck_... — 在 smart-crawler 控制台中生成密钥
注册表： io.github.shulex-voc/smart-crawler

此仓库托管 smart-crawler 服务的公开 MCP 清单。它是发现和连接的入口——服务本身由远程服务托管。

连接

Claude Code

export SMARTCRAWLER_API_KEY=sck_...
claude mcp add --scope user --transport http smart-crawler \
  https://smartcrawler.io/mcp/ \
  --header "Authorization: Bearer $SMARTCRAWLER_API_KEY"

--scope user 会让所有项目都能使用该服务。不加此参数时，claude mcp add 默认采用 local 范围（仅当前目录可用），这也是常见的“我添加了它，但 /mcp 中什么也没有”问题。使用 claude mcp list 或 /mcp 验证。

Codex（`~/.codex/config.toml`）

[mcp_servers.smart-crawler]
url = "https://smartcrawler.io/mcp/"
bearer_token_env_var = "SMARTCRAWLER_API_KEY"

任意 MCP 客户端

通过 streamable-http 将客户端指向 https://smartcrawler.io/mcp/，并将 API 密钥作为 Bearer token 发送。完整工具列表请参阅 mcp.json，注册表清单请参阅 server.json。

工具（精选）

工具	功能
`reddit_subreddit_playbook`	为子版块的顶级贡献者提供完整的增长攻略
`search_competitor_products`	按品牌 / 国家 / 关键词 / 价格搜索竞争对手目录
`get_voc_reviews`	来自 Trustpilot / Reviews.io / Google Maps 的消费者 VOC 评论
`amazon_voc_report`	Amazon ASIN 评论 + AI VOC 分析（痛点、商品详情页建议）
`competitor_landscape`	按关键词列出 Google Shopping 商家份额排名
`scrape_url`	抓取单个 URL，并提供短期 Agent 记忆
`query_warehouse`	以仓库数据为先的自然语言查询（0 积分）