mcpField
F
firecrawl-map

firecrawl-map

github.com/firecrawl生産性1395.8k 回インストール6 日前に更新
リポジトリ

firecrawl-map について

Firecrawl mapでサイト内のURLを見つけるスキルです。検索条件で大規模サイトの特定ページを探し、後続のスクレイピングやクロール対象を選べます。

主な機能

  1. 01サイトURLの発見
  2. 02検索によるURL候補の絞り込み
  3. 03URL一覧をテキストまたはJSONで保存

活用シーン

  1. 01ドキュメント内の認証ページの特定
  2. 02次にスクレイピングするページの選定
  3. 03サイトURL一覧の作成

インストール

コマンドをコピーしてターミナルで実行します。

$npx skills add https://github.com/firecrawl/skills --skill firecrawl-map

インストール後、Claude Code で/firecrawl-mapを入力して読み込まれたか確認します。

詳細

firecrawl map

サイト上の URL を検出します。大規模なサイト内で特定のページを見つけるには、--search を使用します。

前提条件: map の実行には認証が必要です(キー不要の無料プランはありません)。認証情報がない場合、CLI から対話形式でのログインを求められます。

クイックスタート

# Find a specific page on a large site
firecrawl map "<url>" --search "authentication" -o .firecrawl/filtered.txt

# Get all URLs
firecrawl map "<url>" --limit 500 --json -o .firecrawl/urls.json

すべてのオプション(サイトマップの処理、サブドメインなど)については、firecrawl map --help を実行してください。

完了条件: URL リストが .firecrawl/ に保存され、次にスクレイピングまたはクロールする URL を選択していること。

ヒント

  • map + scrape はよく使われるパターンです:map --search で適切な URL を見つけてから、scrape します。
  • 例:map https://docs.example.com --search "auth" → /docs/api/authentication が見つかる → その URL を scrape する。

関連項目

コメント