DLBrowser

npx dlbrowser connect --key dlb_xxx

60 秒で試す

pip install dlbrowser
dlbrowser fetch https://example.com

フェッチするたびに、どのバックエンドが成功したか、どれくらい時間がかかったかがわかります。 エンジンは動作する中で最も安価なものを選び、サイトにブロックされた場合にのみ段階的に切り替えるためです。

{ "success": true, "backend": "curl_cffi", "load_time": 0.03, "blocked": false }

実行ごとの料金はプランに対して明確に計測されるため、予想外の請求はありません。

{ "plan": "scout", "remaining_daily": 497, "remaining_monthly": 2497,
  "upgrade_url": "https://dekryptlabs.github.io/dlbrowser/pricing.html" }

これはライブゲートウェイからの実際のレスポンスです。無料で始められます。2,500 クレジット、カード登録不要です。

エージェントにこれが必要な理由

エージェントにウェブアクセスを組み込みます。デモでは動作します。しかし、実際のウェブに遭遇すると次のような問題が起きます。

• あるサイトは 50ms の HTTP リクエストで読み込めます。次のサイトは、JS が実行されるまで空の React シェルのままです。
• Cloudflare や DataDome は、ヘッドレスブラウザーにチャレンジページをひそかに表示します。
• エージェント内蔵のフェッチはエラーではなく ""、つまり空文字列を返し、そのまま処理を続けます。
• どのサイトで失敗したのか、どのバックエンドなら成功したのか、いくらかかったのかもわかりません。

DLBrowser は、これらの問題を解決する機能レイヤーです。スクレイパーでもクローラーでもありません。 AI エージェント向けの取得インフラです。信頼性が高く、可観測で、課金可能です。

エンジン：安価な方法から始め、ブロックされた場合にのみ切り替える

curl_cffi  →  tls_client  →  playwright  →  nodriver (CDP)  →  firecrawl
  ~50ms         ~200ms        full JS        max stealth       last resort
  HTTP-level, no browser       │            browser-level, real Chromium
                               └── auto-escalates when a block is detected

実際のフェッチの約 70% では、ブラウザーは必要ありません。50ms のリクエストから始め、ブロックを検出した場合にのみ段階的に切り替えることで、速度とコストを抑えながら、ほかのすべてが止まるサイトにも到達できます。バックエンドは 5 種類です。 Firecrawl は 2 種類、Crawl4AI は 1 種類です。

期待を変えるポイント

トークンを減らして、シグナルを明確に

生の HTML はタグ、スクリプト、定型文をエージェントのコンテキストに大量に流し込みます。ノイズにトークンを消費し、モデルは <div class> の羅列の解析に注意を奪われます。DLBrowser は代わりに、クリーンなマークダウンまたは抽出したコンテンツを返します。

稼働中のゲートウェイを通じた実測値です。Wikipedia の記事の場合：

コンテンツページでは取得1回あたりのコンテキストを約4分の1に削減できます。API コストを抑え、ウィンドウに余裕ができ、モデルが推論するためのシグナルも明確になります。削減量はページによって異なります（リンクがまばらなページでは削減効果は小さく、モードはエージェントが選択します）。そのため、ぜひご自身で測定してください：

import asyncio, tiktoken
from hermes_browser import fetch          # pip install dlbrowser
enc = tiktoken.get_encoding("cl100k_base")
raw = asyncio.run(fetch(url, mode="html"))["content"]["html"]
md  = asyncio.run(fetch(url, mode="markdown"))["content"]["markdown"]
print(len(enc.encode(raw)), "→", len(enc.encode(md)), "tokens")

1行で、あらゆるホストに対応

npx dlbrowser connect --key dlb_xxx
# detects and configures: claude-code · claude-desktop · cursor · windsurf · cline · codex

または、任意の MCP クライアントから無料のホスト型デモゲートウェイを指定してください（ローカル環境を設定せずにお試しいただけます。デモでは一部の機能が制限されています。すべての機能を利用するにはセルフホストしてください）：

claude mcp add dlbrowser --transport http \
  --url https://api.dekryptlabs.com \
  --header "Authorization: Bearer dlb_xxx"

エージェントはすぐに次の機能を利用できます：fetch · scrape · smart_extract · screenshot · markdown · crawl · search · serp · status · account · topup。

信頼できますか？（アーキテクチャ）

Agent / CLI / Extension / MCP client
        │
   ┌────┴─────┐
   │ Gateway  │  Paywalled — 401 no key · 402 over quota · free: status/account
   └────┬─────┘
   ┌────┴─────┐
   │  Router  │  Adaptive per-domain scoring: success · latency · cost · freshness
   └────┬─────┘
   ┌────┴─────────────────────────────┐
   │  curl_cffi → tls → playwright →  │  self-healing cascade
   │  nodriver → firecrawl            │
   └────┬─────────────────────────────┘
   ┌────┴─────┐
   │  Ledger  │  per-run backend · credits · cost · trace_id (OpenTelemetry)
   └──────────┘

ルーターはドメインごとに学習し、利用が増えるほどルーティングが向上します。ゲートウェイより上のすべての部分はMIT ライセンスで、セルフホスト可能です。信頼する前にコードをお読みください。それこそがオープンソースの意義です。

Cloudflare を突破できますか？

実際の多くのサイトで、ブラウザーをまったく使わずに対応できます。 データセンターの IP から、住宅用プロキシを使わずに Cloudflare で保護された5つのサイトをテストしました（最悪の条件です）：

HTTP レベルの TLS 偽装だけで5件中3件を突破しました。 失敗した2件はフィンガープリントの問題ではなく、住宅用プロキシ経由のルーティングが必要な IP レピュテーションによるブロックです（対応していますが、このテストでは無効にしていました）。Cloudflare をあらゆる状況で突破できるツールはありません。DLBrowser は段階的なエスカレーションで対応します。完全な方法論と「Cloudflare の突破が実際に意味すること」については、 marketing/cloudflare.mdをご覧ください。

Firecrawl／Crawl4AI との幅広い直接比較ベンチマークはまだ公開していません。次に実施し、方法論もあわせて公開する予定です。作り上げた数字を掲載することはありません。 この表を鵜呑みにせず、ご自身にとって最も難しいサイトでお試しください：

pip install "dlbrowser[full]" && python3 -m playwright install chromium
dlbrowser fetch <a-url-that-blocks-your-current-tool>   # see the backend that got through

料金

1クレジットでバックエンドを問わず1ページを取得できます。年払いは20％割引です。セルフホストは永久に無料です。 料金の詳細 → PRICING.md · ホスト版：dekryptlabs.github.io/dlbrowser/pricing.html

会社で承認されますか？

• マルチテナント — 組織、チーム、シート、ロール
• API キー — 作成、取り消し、ローテーション、スコープ設定、有効期限の設定（SHA-256 でハッシュ化）
• 監査ログ — 誰が、いつ、どのような操作を、いくらのコストで行ったかを記録する改ざん不可能なイベント台帳
• Webhook — HMAC-SHA256 署名付き、デッドレターキュー対応
• SLA 監視 — ノイズに強い変更検出による、スケジュール設定可能なページ差分の監視
• セルフホスト可能 — Docker のワンライナーで導入でき、全機能に対応。データはネットワーク内に保持されます

Enterprise プランは実際の価格（$999/mo から）を公開しています。「お問い合わせください」という不透明な料金体系はありません。[email protected]

DLBrowserを使用しないほうがよい場合

• 事前構築済みのデータセットが必要 → Bright Data / Apify
• ビジュアルなスクレイピングIDEが必要 → Octoparse
• スクリーンショットのサービスとしての提供が必要 → Urlbox

DLBrowserは、大規模なウェブアクセスにおいて信頼性、可観測性、コスト管理を必要とするAIエージェントを運用するチーム向けです。

ドキュメント

💜 DLBrowserをスポンサーする

DLBrowserはMITライセンスで、今後もずっと無料です。誰でも利用できる無料のホスト型デモゲートウェイも運用しています。スポンサーからの支援は、新しいバックエンド、公開ベンチマーク、サイト固有のスクレイパーの開発に役立ち、無料枠を無料のまま維持できます。エージェントのブロックを回避できた、あるいはトークンを節約できた場合は、ぜひご支援をご検討ください。

スポンサーになる → · 月額10ドルから1,000ドルまでのプランがあります。特典の詳細はSPONSORS.mdをご覧ください。 月額25ドル以上のスポンサーは、下のバナーに名前（100ドル以上の場合はロゴも）を掲載できます — リポジトリ、PyPIページ、npmページを訪れるすべての人の目に触れます。

スポンサー

最初のスポンサーになりませんか — ここに名前またはロゴを掲載します。
スポンサーになる →

npx dlbrowser connect --key dlb_xxx

mcp-name: io.github.DekryptLabs/dlbrowser