UseScraper MCP Server

UseScraper MCP サーバー

UseScraper API を使用してウェブスクレイピング機能を提供する、TypeScript ベースの MCP サーバーです。さまざまな形式でウェブページからコンテンツを抽出できる単一のツール「scrape」を公開します。

機能

ツール

• scrape - ウェブページからコンテンツを抽出します
  • パラメーター：
    • url（必須）：スクレイピングするウェブページの URL
    • format（任意）：コンテンツを保存する形式（text、html、markdown）。デフォルト：markdown
    • advanced_proxy（任意）：ボット検出を回避するために高度なプロキシを使用します。デフォルト：false
    • extract_object（任意）：抽出するデータを指定するオブジェクト

インストール

Smithery 経由でインストール

Smithery を通じて UseScraper を Claude Desktop に自動的にインストールするには：

npx -y @smithery/cli install usescraper-server --client claude

手動インストール

1. リポジトリをクローンします：

   git clone https://github.com/your-repo/usescraper-server.git
   cd usescraper-server
   

2. 依存関係をインストールします：

   npm install
   

3. サーバーをビルドします：

   npm run build
   

設定

Claude Desktop で使用するには、サーバー設定を追加します：

MacOS の場合：~/Library/Application Support/Claude/claude_desktop_config.json Windows の場合：%APPDATA%/Claude/claude_desktop_config.json

{
  "mcpServers": {
    "usescraper-server": {
      "command": "node",
      "args": ["/path/to/usescraper-server/build/index.js"],
      "env": {
        "USESCRAPER_API_KEY": "your-api-key-here"
      }
    }
  }
}

/path/to/usescraper-server をサーバーの実際のパスに、your-api-key-here を UseScraper API キーに置き換えてください。

使用方法

設定すると、MCP インターフェースを通じて「scrape」ツールを使用できます。使用例：

{
  "name": "scrape",
  "arguments": {
    "url": "https://example.com",
    "format": "markdown"
  }
}

開発

自動再ビルドを有効にして開発するには：

npm run watch

デバッグ

MCP サーバーは stdio を介して通信するため、デバッグが難しい場合があります。パッケージスクリプトとして利用できる MCP Inspector の使用をおすすめします：

npm run inspector

Inspector により、ブラウザーでデバッグツールにアクセスするための URL が表示されます。