Scrapewise について
Scrapewiseは、商品・価格データの取得、整形、照合に加え、ウェブ、Amazon、地域の事業者を検索できるホスト型MCPサーバーです。管理ツールセットを有効にすると、スクレーパーの作成と実行も行えます。
主な機能
- 01商品・価格データの抽出
- 02商品データ行の整形と正規化
- 03Google、Amazon、地域事業者の検索
- 04公開ウェブページの取得
- 05スクレーパーの設定と実行
活用シーン
- 01複数店舗の商品価格の比較
- 02地域事業者と連絡先の検索
- 03ウェブサイト収集用スクレーパーの構築
MCP 対応
Scrapewiseは、エンドポイントとAPIキーでクライアントから接続するホスト型Streamable HTTP MCPサーバーです。利用可能なツールは、選択したツールセットとAPIキーの権限によって異なります。
設定
リモートサーバーはインストール不要です。クライアントを選んで設定をコピーするか、ワンクリックで導入できます。
https://mcp.scrapewise.ai/mcpclaude mcp add --transport http ai-scrapewise-scrapewise https://mcp.scrapewise.ai/mcp{"mcpServers":{"ai-scrapewise-scrapewise":{"type":"http","url":"https://mcp.scrapewise.ai/mcp"}}}Cursor で開く{"servers":{"ai-scrapewise-scrapewise":{"type":"http","url":"https://mcp.scrapewise.ai/mcp"}}}VS Code で開く{"mcpServers":{"ai-scrapewise-scrapewise":{"type":"http","url":"https://mcp.scrapewise.ai/mcp"}}}{"mcpServers":{"ai-scrapewise-scrapewise":{"serverUrl":"https://mcp.scrapewise.ai/mcp"}}}コマンドはターミナルで実行し、JSON は各クライアントの MCP 設定に貼り付けて再起動します。認可が必要なサーバーは初回接続時にログインを求めます。
https://mcp.scrapewise.ai/mcp認証が必要ツール
詳細
ScrapeWise MCP サーバー
AI エージェント内から、あらゆるウェブサイトの商品データや価格データをスクレイピング、クリーニング、照合できます。
ScrapeWise はホスト型のModel Context Protocolサーバーを提供します。MCP クライアントの接続先に 1 つの URL を指定し、API キーを追加するだけです。エージェントは、あらゆるショップや Amazon から商品データや価格データを読み取ったり、地域のビジネスを見つけたり、Google や Amazon を検索したり、ウェブページを取得したり、アカウントに保存された行を読み取ったりできるようになります。URL に ?toolsets=outcome,admin を追加すると、スクレイパーの作成と実行もできます。
- エンドポイント:
https://mcp.scrapewise.ai/mcp - セットアップツール付きエンドポイント(スクレイパーの作成用):
https://mcp.scrapewise.ai/mcp?toolsets=outcome,admin - トランスポート: Streamable HTTP
- レジストリ名:
ai.scrapewise/scrapewise(公式 MCP レジストリ) - 認証:
Authorization: Bearer <your API key> - ドキュメント: scrapewise.ai/mcp
このリポジトリには、接続マニフェストとサーバーごとの設定が含まれています。サーバー自体はホストされているため、ここからインストールしたり実行したりする必要はありません。
API キーを取得する
scrapewise.aiで登録し、Settings → API Keysに移動して API キーを作成します。料金は従量課金制です。
接続する
以下の各スニペット内の YOUR_SCRAPEWISE_API_KEY を置き換えてください。
以下のスニペットは、基本的なデータツールに接続します。スクレイパーも作成するには、同じ場所で次のアドレスを使用します。
https://mcp.scrapewise.ai/mcp?toolsets=outcome,admin
MCP キーを初めて取得したアカウントには、現在、基本的なツールのみがベース URL で表示されます。古い MCP キーを引き続き保持しているアカウントでは、すべてのツールがそのまま利用できます。この選択はセッション開始時に読み込まれるため、変更後は再接続してください。toolsets と正確に記述してください。スイッチのスペルを間違えても、エラーなしで無視されます。
Claude Code
claude mcp add scrapewise --transport http https://mcp.scrapewise.ai/mcp \
--header 'Authorization: Bearer YOUR_SCRAPEWISE_API_KEY'
セットアップツールを使用する場合。zsh では、引用符なしの ? を含むとコマンドが正しく動作しないため、シングルクォートが必要です。
claude mcp add scrapewise --transport http 'https://mcp.scrapewise.ai/mcp?toolsets=outcome,admin' \
--header 'Authorization: Bearer YOUR_SCRAPEWISE_API_KEY'
Claude Desktop
claude_desktop_config.json:
{
"mcpServers": {
"scrapewise": {
"url": "https://mcp.scrapewise.ai/mcp",
"headers": {
"Authorization": "Bearer YOUR_SCRAPEWISE_API_KEY"
}
}
}
}
Cursor
同じ形式を ~/.cursor/mcp.json で使用します。
{
"mcpServers": {
"scrapewise": {
"url": "https://mcp.scrapewise.ai/mcp",
"headers": {
"Authorization": "Bearer YOUR_SCRAPEWISE_API_KEY"
}
}
}
}
VS Code
VS Code は例外です。マップ名は mcpServers ではなく servers で、リモートサーバーではトランスポートを "type": "http" と指定する必要があります。どちらかを間違えると、VS Code は何も知らせずにエントリをスキップします。
コマンドパレットを開いて、MCP: Open User Configurationを選択し、次のように入力します。
{
"servers": {
"scrapewise": {
"type": "http",
"url": "https://mcp.scrapewise.ai/mcp",
"headers": {
"Authorization": "Bearer YOUR_SCRAPEWISE_API_KEY"
}
}
}
}
その他のクライアント
Streamable HTTP に対応するクライアントなら、どれでも動作します。エンドポイント、Authorization ヘッダー、名前 scrapewise を指定してください。
エージェントでできること
| 分野 | 内容 |
|---|---|
| 商品 | あらゆるショップの商品行:名前、価格、通貨、在庫状況、ブランド、SKU/GTIN/EAN、画像、説明、評価。Amazon の商品ページでは、必要に応じてすべての販売者の価格、状態、配送情報も取得できます |
| クリーニング | 既存の行を整理します:EUR 価格や、キログラム/リットル/個あたりの価格を追加し、テキストをトリミングして、重複を削除します。無料です。データの取得は行いません |
| 検索 | Google マップから地域のビジネスを検索します:名前、住所、電話番号、ウェブサイト、評価(1 回あたり最大 20 件) |
| サーチ | Google ウェブ、ニュース、ショッピングの検索結果、Amazon の検索結果、Google トレンドの推移 |
| 取得 | 公開ウェブページ 1 件のテキストまたは HTML |
| 追跡 | 長時間のジョブ:進捗状況、行、キャンセル |
| 読み取り | アカウント内のグループと、それらに保存された行 |
セットアップツールを使用する場合(?toolsets=outcome,admin)
| 分野 | 内容 |
|---|---|
| 作成 | ページをプレビューし、URL または cURL コマンドからスクレイパーを作成して、抽出する列を定義します |
| 整理 | プロジェクトごとにスクレイパーをグループ化し、スクレイパーのリンクリストに商品 URL を追加し、グループを共有します |
| 実行 | 1 つのスクレイパー、グループ全体、または一時的な URL リストを実行し、実行を停止して、実行エラーを確認します |
| 読み取り | サンプル行、すべての結果、実行履歴、実行ごとの列を取得し、グループをエクスポートします |
| 変換 | グループ単位の後処理ルール:通貨換算、数量の正規化、単位あたりの価格 |
| 監視 | スケジュール、競合他社の価格を基準とした価格監視、データ品質と保持の設定 |
ツール
サーバーは接続後に独自のツール一覧を公開するため、これは参考情報であり、正確な情報源ではありません。API キーごとに表示される内容は、接続先のアドレスや、そのキー自体のアクセスレベルによって異なる場合があります。詳しくはdocs.scrapewise.aiをご覧ください。
デフォルトのツール(アカウントの最初のキー)
get_product_data · get_amazon_product · clean_product_data · find_local_businesses ·
google_search · search_amazon · google_trends · fetch_page · get_results · cancel_job ·
scrapewise_get_scraper_group_list · scrapewise_get_scraper_data_group_client
有料ツールには料金が明記されており、quote_only: trueを指定すると、何も消費せずに料金とウォレット残高が返されます。clean_product_dataは無料です。すでに取得済みの行に対して処理を行い、データの取得はしません。読み取り専用キー(LLM_READ)に表示されるのは、無料ツールのget_results、clean_product_data、2つの読み取りツールのみです。有料ツールの利用と構築には、フルアクセスキー(LLM_FULL)が必要です。
セットアップツール(?toolsets=admin または ?toolsets=outcome,admin で表示)
スクレイパーを作成する
scrapewise_preview_scraper_from_url · scrapewise_preview_scraper_from_curl ·
scrapewise_preview_scraper_preview_rule · scrapewise_create_scraper ·
scrapewise_create_scraper_v2 · scrapewise_create_file_scraper ·
scrapewise_get_scraper · scrapewise_get_scraper_v2 · scrapewise_get_scraper_list ·
scrapewise_get_scraper_config_parameters · scrapewise_update_scraper_schema ·
scrapewise_update_scraper_fallback · scrapewise_update_file_scraper_file ·
scrapewise_delete_scraper · scrapewise_delete_scraper_preview
スクレイパーとその URL を整理する
scrapewise_create_scraper_group · scrapewise_get_scraper_group_list ·
scrapewise_delete_scraper_group · scrapewise_delete_scraper_group_preview ·
scrapewise_create_scraper_site · scrapewise_get_scraper_site ·
scrapewise_get_scraper_site_links · scrapewise_update_scraper_site_from_source ·
scrapewise_delete_scraper_site · scrapewise_get_scraper_sitemaps ·
scrapewise_get_scraper_shared_group_list · scrapewise_list_scraper_shared_group_list ·
scrapewise_update_scraper_shared_group
実行する
scrapewise_run_scraper · scrapewise_run_scraper_group · scrapewise_run_scraper_url_list ·
scrapewise_run_scraper_data_group · scrapewise_run_scraper_sitemaps_harvest ·
scrapewise_stop_scraper · scrapewise_stop_scraper_group ·
scrapewise_stop_scraper_shared_group · scrapewise_get_scraper_load_history ·
scrapewise_get_scraper_job_errors · scrapewise_get_scraper_load_site ·
scrapewise_get_scraper_load_site_content
データを読み取る
scrapewise_get_scraper_sample_data · scrapewise_get_scraper_data_group ·
scrapewise_get_scraper_data_group_client · scrapewise_get_scraper_data_group_categories ·
scrapewise_update_scraper_data_group_category ·
scrapewise_delete_scraper_data_group_category ·
scrapewise_delete_scraper_data_group_category_preview · scrapewise_get_run_columns ·
scrapewise_get_run_columns_batch · scrapewise_export_scraper_data_group ·
scrapewise_delete_scraper_data · scrapewise_delete_scraper_data_preview
クリーンアップと変換
scrapewise_get_scraper_group_post_process_rules ·
scrapewise_update_scraper_group_post_process_rules ·
scrapewise_update_scraper_group_currency · scrapewise_update_scraper_group_ai_control ·
scrapewise_update_scraper_group_data_quality · scrapewise_create_customer_schema ·
scrapewise_list_customer_schema · scrapewise_delete_customer_schema ·
scrapewise_delete_customer_schema_preview
価格を監視する
scrapewise_update_scraper_group_price_monitor ·
scrapewise_get_scraper_group_price_monitor_anchor_competitors ·
scrapewise_update_scraper_group_price_monitor_anchor_competitor ·
scrapewise_delete_scraper_group_price_monitor_anchor_competitor ·
scrapewise_list_scraper_group_price_monitor_picks ·
scrapewise_update_scraper_group_price_monitor_pick ·
scrapewise_delete_scraper_group_price_monitor_pick
スケジュールと保持期間
scrapewise_update_scraper_group_schedule · scrapewise_update_scraper_group_start_type ·
scrapewise_update_scraper_group_retention · scrapewise_update_scraper_retention
エンリッチメントと SEO フィールド
scrapewise_get_enrichment · scrapewise_delete_enrichment ·
scrapewise_list_enrichable_scrapers · scrapewise_get_scraper_seo_fields ·
scrapewise_search_scraper_seo_fields
アカウント
scrapewise_create_api_key · scrapewise_list_api_keys · scrapewise_delete_api_key
マニフェスト
server.json はミラーです。正規の情報源は
https://scrapewise.ai/server.json です。このファイルは
ScrapeWise のサイトリポジトリから配信され、テストスイートで検証されています。両者に食い違いがある場合は、ホストされているファイルが正しいものです。
ai.scrapewise/* の名前空間の所有権は、
https://scrapewise.ai/.well-known/mcp-registry-auth で公開されている Ed25519 公開鍵によって証明されています。
サポート
- ドキュメント:docs.scrapewise.ai
- メール:[email protected]
ライセンス
MIT — LICENSE を参照してください。このライセンスの対象はこのリポジトリの内容のみであり、ホストされているサービスは含まれません。
コメント
AI アプリケーションが外部のツールやデータソースに統一的な方法で接続するためのオープンなプロトコルです。クライアントはモデルとの対話を担い、MCP サーバーはツール・リソース・プロンプトテンプレートを提供します。標準メッセージでやり取りするため、1 つのサーバーを複数のクライアントで再利用できます。