Scraperapi について
Scraperapiは、ウェブページのスクレイピング、Amazonの商品・検索データ、Google検索結果を扱うMCPツールを提供します。ページ内容や構造化データが必要な用途向けで、JavaScriptのレンダリングや地域指定にも対応します。
主な機能
- 01HTMLまたはMarkdown形式でページを取得
- 02JavaScriptを多用するページをレンダリング
- 03ASINからAmazon商品詳細を取得
- 04構造化されたAmazon・Google検索結果を取得
活用シーン
- 01分析用にウェブページの内容を収集
- 02JavaScript駆動のサイトをスクレイピング
- 03Amazonの商品詳細や一覧を調査
- 04クエリに対応するGoogle検索結果を取得
MCP 対応
ScraperAPIのスクレイピングおよび検索ツールをMCPクライアントに公開します。Pipeworx経由、またはローカルのstdio MCPサーバーとして利用でき、呼び出しにはユーザー自身のScraperAPIキーが必要です。
設定
リモートサーバーはインストール不要です。クライアントを選んで設定をコピーするか、ワンクリックで導入できます。
https://gateway.pipeworx.io/scraperapi/mcpclaude mcp add --transport http pipeworx-io-scraperapi https://gateway.pipeworx.io/scraperapi/mcp{"mcpServers":{"pipeworx-io-scraperapi":{"type":"http","url":"https://gateway.pipeworx.io/scraperapi/mcp"}}}Cursor で開く{"servers":{"pipeworx-io-scraperapi":{"type":"http","url":"https://gateway.pipeworx.io/scraperapi/mcp"}}}VS Code で開く{"mcpServers":{"pipeworx-io-scraperapi":{"type":"http","url":"https://gateway.pipeworx.io/scraperapi/mcp"}}}{"mcpServers":{"pipeworx-io-scraperapi":{"serverUrl":"https://gateway.pipeworx.io/scraperapi/mcp"}}}コマンドはターミナルで実行し、JSON は各クライアントの MCP 設定に貼り付けて再起動します。認可が必要なサーバーは初回接続時にログインを求めます。
ツール
詳細
mcp-scraperapi
ScraperAPI MCP — プロキシベースのウェブサービス ScraperAPI(scraperapi.com)をラップします。
Pipeworx の一部です。AI エージェントを1683以上の稼働中のデータソースに接続する MCP ゲートウェイです。
ツール
| ツール | 説明 |
|---|---|
scraperapi_scrape | ScraperAPIのローテーションプロキシ経由で任意のウェブページをスクレイピングし、そのコンテンツを返します。デフォルトではHTMLを返しますが、output_format:"markdown"を指定すると、整形されたMarkdownを返します(LLMへの入力に最適です)。JavaScriptを多用するページ(SPA)にはrender:true、スクレイピングが難しいサイト(レジデンシャルプロキシ)にはpremium:trueを使用し、地域を指定するにはcountry_codeを設定します。例:scraperapi_scrape({ url: "https://example.com", output_format: "markdown", render: true, _apiKey: "your-key" }) |
scraperapi_amazon_product | ASINでAmazonの商品データ(タイトル、価格、評価、レビュー数、特徴、画像、在庫状況)を構造化して取得します。例:scraperapi_amazon_product({ asin: "B0BFC7WQ6R", country: "us", tld: "com", _apiKey: "your-key" }) |
scraperapi_amazon_search | Amazonを検索し、商品タイトル、ASIN、価格、評価、サムネイルなどの結果を構造化して取得します。例:scraperapi_amazon_search({ query: "wireless earbuds", country: "us", tld: "com", _apiKey: "your-key" }) |
scraperapi_google_search | Google検索を実行し、オーガニック検索結果、タイトル、リンク、スニペット、関連データなどのSERP結果を構造化して取得します。例:scraperapi_google_search({ query: "best running shoes 2026", country_code: "us", tld: "com", _apiKey: "your-key" }) |
クイックスタート
MCP クライアント(Claude Desktop、Cursor、Windsurf など)に追加します。
{
"mcpServers": {
"scraperapi": {
"url": "https://gateway.pipeworx.io/scraperapi/mcp"
}
}
}
このエンドポイントが実際に提供するもの
https://gateway.pipeworx.io/scraperapi/mcp の tools/list は、上の表にあるツールに加えて、共有 Pipeworx メタツール(ask_pipeworx、discover_tools、search_within、remember/recall など、ゲートウェイ全体で利用できるツール群)も返します。そのため、表示されるツール数はこの表より多くなります。現在、単一パックのエンドポイントには、そのパック独自のツールとともに、およそ30個の共有ツールが一覧表示されます。接続の initialize レスポンスに正確な範囲が記載されており、その日の状況を確認するうえでの正式な情報源です。
これは意図した動作であり、偶然の多重化ではありません。メタツールを使うと、ask_pipeworx によってカタログ全体から適切なツールへルーティングできるため、このパックで扱わない質問にも、MCP サーバーを追加せずに対応できます。現在、メタツールなしでパックのエンドポイントに接続する方法はありません。追加のスキーマによるコンテキスト消費がルーティングの利点を上回る場合は、複数のパックエンドポイントではなく、フルゲートウェイに一度だけ接続してください。
また、フル Pipeworx ゲートウェイに接続すると、このパックのツールだけでなく、すべてのパックのツールが直接一覧表示されます。
{
"mcpServers": {
"pipeworx": {
"url": "https://gateway.pipeworx.io/mcp"
}
}
}
どちらのURLも、同じゲートウェイと同じ1683以上のデータソースに接続します。違いは、どのパックのツールが直接一覧表示されるかだけです。どちらからでも、ask_pipeworx を使えばすべてのツールにアクセスできます。
MCP クライアントがない場合:HTTP経由で呼び出す
このパックでは独自のAPIキー(_apiKey)が必要です。こちらではキーを代行して用意していないため、キーなしで実行できるcurlの例はありません。ツールの詳細を確認するには、GET https://gateway.pipeworx.io/v1/tools/scraperapi_scrape を実行します。ツールを検索するには、POST https://gateway.pipeworx.io/v1/tools/search_packs に {"query":"..."} を指定します。
スタンドアロン(ゲートウェイアカウント不要)
このパッケージはローカルのstdio MCP サーバーとしても実行できます。Pipeworxアカウントも、ゲートウェイへの往復通信も不要です。
{
"mcpServers": {
"scraperapi": {
"command": "npx",
"args": ["-y", "@pipeworx/mcp-scraperapi"]
}
}
}
または、直接実行して起動を確認します。
npx -y @pipeworx/mcp-scraperapi
stdin/stdout経由でMCPを使用し、initialize/tools/list/tools/call に応答します。対象となるのは、このパックのツールのみです。上記のゲートウェイ接続で追加される共有メタツールは含まれません。同じソース、同じツールで、ask_pipeworxによるルーティングはありません。
ask_pipeworx の使用
ツールを直接呼び出す代わりに、自然な英語で質問できます。上記のパックエンドポイントとフルゲートウェイのどちらでも利用できます。
ask_pipeworx({ question: "your question about Scraperapi data" })
ゲートウェイが適切なツールを選び、引数を自動的に設定します。
More
License
MIT
コメント
AI アプリケーションが外部のツールやデータソースに統一的な方法で接続するためのオープンなプロトコルです。クライアントはモデルとの対話を担い、MCP サーバーはツール・リソース・プロンプトテンプレートを提供します。標準メッセージでやり取りするため、1 つのサーバーを複数のクライアントで再利用できます。