mcpField
S
Scraperapi

Scraperapi

リモート
pipeworx.ioブラウザ自動化05 週間前に更新
リポジトリ公式サイト

Scraperapi について

Scraperapiは、ウェブページのスクレイピング、Amazonの商品・検索データ、Google検索結果を扱うMCPツールを提供します。ページ内容や構造化データが必要な用途向けで、JavaScriptのレンダリングや地域指定にも対応します。

主な機能

  1. 01HTMLまたはMarkdown形式でページを取得
  2. 02JavaScriptを多用するページをレンダリング
  3. 03ASINからAmazon商品詳細を取得
  4. 04構造化されたAmazon・Google検索結果を取得

活用シーン

  1. 01分析用にウェブページの内容を収集
  2. 02JavaScript駆動のサイトをスクレイピング
  3. 03Amazonの商品詳細や一覧を調査
  4. 04クエリに対応するGoogle検索結果を取得

MCP 対応

ScraperAPIのスクレイピングおよび検索ツールをMCPクライアントに公開します。Pipeworx経由、またはローカルのstdio MCPサーバーとして利用でき、呼び出しにはユーザー自身のScraperAPIキーが必要です。

設定

リモートサーバーはインストール不要です。クライアントを選んで設定をコピーするか、ワンクリックで導入できます。

エンドポイントhttps://gateway.pipeworx.io/scraperapi/mcp
インストールコマンドをコピー
Claude CodeTerminal
Cursor.cursor/mcp.json
VS Code.vscode/mcp.json
Claude Desktopclaude_desktop_config.json
Windsurf~/.codeium/windsurf/mcp_config.json

コマンドはターミナルで実行し、JSON は各クライアントの MCP 設定に貼り付けて再起動します。認可が必要なサーバーは初回接続時にログインを求めます。

ツール

詳細

mcp-scraperapi

ScraperAPI MCP — プロキシベースのウェブサービス ScraperAPI(scraperapi.com)をラップします。

Pipeworx の一部です。AI エージェントを1683以上の稼働中のデータソースに接続する MCP ゲートウェイです。

ツール

ツール説明
scraperapi_scrapeScraperAPIのローテーションプロキシ経由で任意のウェブページをスクレイピングし、そのコンテンツを返します。デフォルトではHTMLを返しますが、output_format:"markdown"を指定すると、整形されたMarkdownを返します(LLMへの入力に最適です)。JavaScriptを多用するページ(SPA)にはrender:true、スクレイピングが難しいサイト(レジデンシャルプロキシ)にはpremium:trueを使用し、地域を指定するにはcountry_codeを設定します。例:scraperapi_scrape({ url: "https://example.com", output_format: "markdown", render: true, _apiKey: "your-key" })
scraperapi_amazon_productASINでAmazonの商品データ(タイトル、価格、評価、レビュー数、特徴、画像、在庫状況)を構造化して取得します。例:scraperapi_amazon_product({ asin: "B0BFC7WQ6R", country: "us", tld: "com", _apiKey: "your-key" })
scraperapi_amazon_searchAmazonを検索し、商品タイトル、ASIN、価格、評価、サムネイルなどの結果を構造化して取得します。例:scraperapi_amazon_search({ query: "wireless earbuds", country: "us", tld: "com", _apiKey: "your-key" })
scraperapi_google_searchGoogle検索を実行し、オーガニック検索結果、タイトル、リンク、スニペット、関連データなどのSERP結果を構造化して取得します。例:scraperapi_google_search({ query: "best running shoes 2026", country_code: "us", tld: "com", _apiKey: "your-key" })

クイックスタート

MCP クライアント(Claude Desktop、Cursor、Windsurf など)に追加します。

{
  "mcpServers": {
    "scraperapi": {
      "url": "https://gateway.pipeworx.io/scraperapi/mcp"
    }
  }
}
このエンドポイントが実際に提供するもの

https://gateway.pipeworx.io/scraperapi/mcp の tools/list は、上の表にあるツールに加えて、共有 Pipeworx メタツール(ask_pipeworx、discover_tools、search_within、remember/recall など、ゲートウェイ全体で利用できるツール群)も返します。そのため、表示されるツール数はこの表より多くなります。現在、単一パックのエンドポイントには、そのパック独自のツールとともに、およそ30個の共有ツールが一覧表示されます。接続の initialize レスポンスに正確な範囲が記載されており、その日の状況を確認するうえでの正式な情報源です。

これは意図した動作であり、偶然の多重化ではありません。メタツールを使うと、ask_pipeworx によってカタログ全体から適切なツールへルーティングできるため、このパックで扱わない質問にも、MCP サーバーを追加せずに対応できます。現在、メタツールなしでパックのエンドポイントに接続する方法はありません。追加のスキーマによるコンテキスト消費がルーティングの利点を上回る場合は、複数のパックエンドポイントではなく、フルゲートウェイに一度だけ接続してください。

また、フル Pipeworx ゲートウェイに接続すると、このパックのツールだけでなく、すべてのパックのツールが直接一覧表示されます。

{
  "mcpServers": {
    "pipeworx": {
      "url": "https://gateway.pipeworx.io/mcp"
    }
  }
}

どちらのURLも、同じゲートウェイと同じ1683以上のデータソースに接続します。違いは、どのパックのツールが直接一覧表示されるかだけです。どちらからでも、ask_pipeworx を使えばすべてのツールにアクセスできます。

MCP クライアントがない場合:HTTP経由で呼び出す

このパックでは独自のAPIキー(_apiKey)が必要です。こちらではキーを代行して用意していないため、キーなしで実行できるcurlの例はありません。ツールの詳細を確認するには、GET https://gateway.pipeworx.io/v1/tools/scraperapi_scrape を実行します。ツールを検索するには、POST https://gateway.pipeworx.io/v1/tools/search_packs に {"query":"..."} を指定します。

スタンドアロン(ゲートウェイアカウント不要)

このパッケージはローカルのstdio MCP サーバーとしても実行できます。Pipeworxアカウントも、ゲートウェイへの往復通信も不要です。

{
  "mcpServers": {
    "scraperapi": {
      "command": "npx",
      "args": ["-y", "@pipeworx/mcp-scraperapi"]
    }
  }
}

または、直接実行して起動を確認します。

npx -y @pipeworx/mcp-scraperapi

stdin/stdout経由でMCPを使用し、initialize/tools/list/tools/call に応答します。対象となるのは、このパックのツールのみです。上記のゲートウェイ接続で追加される共有メタツールは含まれません。同じソース、同じツールで、ask_pipeworxによるルーティングはありません。

ask_pipeworx の使用

ツールを直接呼び出す代わりに、自然な英語で質問できます。上記のパックエンドポイントとフルゲートウェイのどちらでも利用できます。

ask_pipeworx({ question: "your question about Scraperapi data" })

ゲートウェイが適切なツールを選び、引数を自動的に設定します。

More

License

MIT

コメント

MCP は初めてですか?

プロトコルの概要から最初のサーバーの導入まで、よくある疑問にまとめて答えます。

AI アプリケーションが外部のツールやデータソースに統一的な方法で接続するためのオープンなプロトコルです。クライアントはモデルとの対話を担い、MCP サーバーはツール・リソース・プロンプトテンプレートを提供します。標準メッセージでやり取りするため、1 つのサーバーを複数のクライアントで再利用できます。