DLBrowser

npx dlbrowser connect --key dlb_xxx

60 秒快速试用

pip install dlbrowser
dlbrowser fetch https://example.com

每次抓取都会告诉你哪个后端成功访问了网页，以及耗时多久——因为引擎会选择能正常工作的最便宜方案，只有遇到网站阻拦时才升级：

{ "success": true, "backend": "curl_cffi", "load_time": 0.03, "blocked": false }

每次运行都会按套餐公开计量——不会收到意外账单：

{ "plan": "scout", "remaining_daily": 497, "remaining_monthly": 2497,
  "upgrade_url": "https://dekryptlabs.github.io/dlbrowser/pricing.html" }

这是从在线网关获取的真实响应。免费开始——2,500 个信用点，无需银行卡。

为什么你的 Agent 需要它

你为 Agent 接入网页访问能力。在演示中一切正常，直到它遇到真实网络：

• 一个网站通过 50 毫秒的 HTTP 请求就能加载。下一个网站却只有一个空的 React 外壳，必须运行 JS 才会显示内容。
• Cloudflare 和 DataDome 会悄悄向你的无头浏览器发送验证页面。
• Agent 内置的 fetch 返回 ""——不是报错，而是一个空字符串——然后继续运行。
• 你不知道哪些网站访问失败、哪个后端本可以成功，也不知道这一切花了多少钱。

DLBrowser 是解决这些问题的能力层。它不是爬虫，也不是抓取器。 它是面向 AI Agent 的数据获取基础设施——可靠、可观测、可计费。

引擎：从低成本方案开始，仅在受阻时升级

curl_cffi  →  tls_client  →  playwright  →  nodriver (CDP)  →  firecrawl
  ~50ms         ~200ms        full JS        max stealth       last resort
  HTTP-level, no browser       │            browser-level, real Chromium
                               └── auto-escalates when a block is detected

约 70% 的实际抓取无需浏览器。先从 50 毫秒的请求开始，仅在检测到拦截时逐级升级，既能保持快速、低成本，又能访问其他工具无法访问的网站。五种后端。 Firecrawl 有两种。Crawl4AI 只有一种。

重新定义预期

更少的令牌，更清晰的信号

原始 HTML 会把标签、脚本和样板内容塞进 Agent 的上下文——你要为这些噪声支付令牌费用，模型还得费心解析 <div class> 的内容。DLBrowser 则会返回干净的 markdown 或提取后的内容。

通过实时网关进行的实际测量——一篇 Wikipedia 文章：

在内容页面上，每次抓取所需的上下文约减少 4 倍——降低 API 成本，为上下文窗口腾出更多空间，也为模型提供更好的推理信号。节省量因页面而异（稀疏的链接列表节省很少，而且你的 Agent 可以选择模式），所以请自行测量：

import asyncio, tiktoken
from hermes_browser import fetch          # pip install dlbrowser
enc = tiktoken.get_encoding("cl100k_base")
raw = asyncio.run(fetch(url, mode="html"))["content"]["html"]
md  = asyncio.run(fetch(url, mode="markdown"))["content"]["markdown"]
print(len(enc.encode(raw)), "→", len(enc.encode(md)), "tokens")

一行命令，适用于所有主机

npx dlbrowser connect --key dlb_xxx
# detects and configures: claude-code · claude-desktop · cursor · windsurf · cline · codex

或者让任意 MCP 客户端连接到免费托管演示版网关（无需本地设置即可试用——演示版会限制部分功能；自托管即可使用完整引擎）：

claude mcp add dlbrowser --transport http \
  --url https://api.dekryptlabs.com \
  --header "Authorization: Bearer dlb_xxx"

你的 Agent 会立即获得：fetch · scrape · smart_extract · screenshot · markdown · crawl · search · serp · status · account · topup。

我可以信任它吗？（架构）

Agent / CLI / Extension / MCP client
        │
   ┌────┴─────┐
   │ Gateway  │  Paywalled — 401 no key · 402 over quota · free: status/account
   └────┬─────┘
   ┌────┴─────┐
   │  Router  │  Adaptive per-domain scoring: success · latency · cost · freshness
   └────┬─────┘
   ┌────┴─────────────────────────────┐
   │  curl_cffi → tls → playwright →  │  self-healing cascade
   │  nodriver → firecrawl            │
   └────┬─────────────────────────────┘
   ┌────┴─────┐
   │  Ledger  │  per-run backend · credits · cost · trace_id (OpenTelemetry)
   └──────────┘

路由器会针对不同域名进行学习——使用越多，路由效果越好。网关以上的所有内容均为 MIT 许可且可自托管。在信任它之前先阅读代码；这正是开源的意义所在。

它能击败 Cloudflare 吗？

在许多真实网站上，**完全不需要浏览器。**我们使用数据中心 IP，且不通过住宅代理，测试了 5 个受 Cloudflare 保护的网站（最坏情况）：

**仅靠 HTTP 层面的 TLS 模拟就有 3/5 通过。**两项失败并非指纹识别失败——而是 IP 信誉拦截，需要通过住宅代理进行路由（支持此功能，但本次测试中未启用）。没有任何工具能在所有情况下击败 Cloudflare；DLBrowser 的方案是分层升级。完整方法及“击败 Cloudflare 实际意味着什么” → marketing/cloudflare.md。

我们尚未发布与 Firecrawl/Crawl4AI 的大范围对比基准测试——这是接下来的计划，届时会同时公布测试方法。我们不会编造数据。别相信我们的表格——请在你最难抓取的网站上自行测试：

pip install "dlbrowser[full]" && python3 -m playwright install chromium
dlbrowser fetch <a-url-that-blocks-your-current-tool>   # see the backend that got through

定价

1 点数 = 1 个页面，适用于任意后端。年付优惠 20%。自托管永久免费。 完整定价 → PRICING.md · 托管版：dekryptlabs.github.io/dlbrowser/pricing.html

我的公司会批准使用它吗？

• 多租户——组织、团队、席位、角色
• API 密钥——创建、撤销、轮换、限定范围、设置过期时间（经 SHA-256 哈希处理）
• 审计日志——不可变的事件台账：谁在何时做了什么、花费了多少
• Webhooks——使用 HMAC-SHA256 签名，并配备死信队列
• SLA 监控——按计划对页面进行差异比对，并通过容噪变更检测识别变化
• 自托管——一条 Docker 命令即可部署，功能完全一致，数据留在你的网络中

Enterprise 套餐公布真实价格（$999/月起）——没有“联系我们”这种黑箱。[email protected]

何时不使用 DLBrowser

• 你需要预构建数据集 → Bright Data / Apify
• 你需要可视化抓取 IDE → Octoparse
• 你需要截图即服务 → Urlbox

DLBrowser 适用于需要大规模可靠、可观测且成本可控的 Web 访问的 AI Agent 团队。

文档

💜 赞助 DLBrowser

DLBrowser 采用 MIT 许可证，永久免费；我们还一直为所有人提供一个免费托管演示网关。赞助资金将用于开发新的后端、发布基准测试、构建针对特定网站的抓取工具，并确保免费层永久免费。如果它帮助你的 Agent 避免被屏蔽，或者为你节省了令牌，请考虑赞助。

成为赞助者 → · 套餐价格从 $10/mo 到 $1,000/mo。完整权益请见 SPONSORS.md。 每月赞助 $25 及以上，你的名字（赞助 $100 及以上可显示徽标）将出现在下方横幅中——访问代码仓库、PyPI 页面和 npm 页面的所有人都能看到。

我们的赞助者

成为首位赞助者——在这里展示你的名字或徽标。
成为赞助者 →

npx dlbrowser connect --key dlb_xxx

mcp-name: io.github.DekryptLabs/dlbrowser