Web Content & URL Tools

Web Content & URL Tools MCP Server

AI エージェントにウェブの読み取りとチェック用の26 個のツールを提供する、リモートのModel Context Protocol サーバーです。ブラウザーもセットアップも不要で、成功した呼び出しに対してのみ料金が発生します。

あらゆるページをクリーンな Markdown として読み込み、メタデータや構造を取得し、技術スタックを検出できます。また、リダイレクト、TLS 証明書、セキュリティヘッダー、robots.txt、サイトマップ、フィード、ドメイン（WHOIS/DNS）、SEO、リンク切れ、メール認証（SPF、DMARC、DKIM）、シングルサインオン（SAML、OpenID Connect）をチェックできます。日常的な開発者向けユーティリティ（cron、正規表現、色、Unicode、タイムゾーン）と、Hyperliquid の無期限先物市場データも利用できます。

• Apify Store： https://apify.com/avalonai/web-content-url-tools-mcp
• 開発者向けドキュメント： https://avaloncompany.ai/developers/
• トランスポート： Streamable HTTP（リモート、Apify Standby 上でホスト）

接続

オプション 1 — Standby URL + Apify API トークン

Apify API トークンを Bearer トークンとして使用します。Claude Desktop、Claude Code、Cursor、VS Code、Windsurf、およびヘッダー付きのリモートサーバーに対応するあらゆる MCP クライアントで動作します。

{
  "mcpServers": {
    "web-content-url-tools": {
      "url": "https://avalonai--web-content-url-tools-mcp.apify.actor/mcp",
      "headers": { "Authorization": "Bearer <YOUR_APIFY_TOKEN>" }
    }
  }
}

オプション 2 — mcp.apify.com 経由の OAuth（トークンのコピー不要）

MCP OAuth に対応するクライアントは、Apify がホストする MCP ゲートウェイを通じて接続し、ブラウザーで Apify アカウントにサインインできます。

https://mcp.apify.com?tools=avalonai/web-content-url-tools-mcp

Claude Code の例：

claude mcp add --transport http web-content-url-tools "https://mcp.apify.com?tools=avalonai/web-content-url-tools-mcp"

ツール

ウェブページと URL

ツール	返される内容	呼び出しあたりの料金
to_markdown	メインコンテンツをクリーンで LLM 向けの Markdown として出力（メニュー、広告、フッターを削除）、単語数・文字数、言語	$0.003
get_metadata	タイトル、説明、プレビュー画像、サイト名、正規 URL、ファビコン、作成者、公開日時、Open Graph / Twitter タグ	$0.003
extract_structure	見出しのアウトライン、内部／外部リンク、画像、テーブル、JSON-LD	$0.003
detect_technologies	CMS、フレームワーク、EC プラットフォーム、CDN、分析ツール、決済ツール（根拠付き）	$0.003
trace_redirects	最終 URL までのすべてのリダイレクト経路（HTTP と meta refresh）— 短縮リンクを展開	$0.001
check_ssl	証明書の発行者、有効期限、残り日数、SAN、ブラウザーから信頼されているかどうか	$0.001
grade_security_headers	セキュリティヘッダー、情報漏えい、安全でない Cookie の A+ から F までの評価	$0.001
parse_robots	ユーザーエージェントごとの robots.txt ルール、サイトマップ、指定パスがクロール可能かどうか	$0.001
parse_sitemap	サイトマップまたはサイトマップインデックスからの URL（自動検出、gzip 対応）	$0.001
read_feed	RSS、Atom、RDF フィードを JSON として出力（ウェブサイト URL から自動検出）	$0.001
lookup_domain	WHOIS（RDAP）のレジストラ、日付、ドメインの経過年数、ネームサーバー、DNS レコード、MX/SPF/DMARC	$0.001
audit_seo	優先順位付きの問題点と修正方法を含む、ページ内 SEO のスコアと評価	$0.003
check_broken_links	最大 100 件のリンクをチェックし、リンク切れ、リダイレクト、ボットによるブロックを個別に報告	$0.003

メールと ID の診断

ツール	返される内容	呼び出しあたりの料金
check_email_domain	MX、SPF（ルックアップ上限 10 件）、DMARC、DKIM、MTA-STS、TLS-RPT、BIMI を合格／警告／不合格で評価し、修正方法と 0〜100 のスコアを提示	$0.003
analyze_saml_metadata	SAML メタデータ（XML または URL）：エンティティ ID、エンドポイントとバインディング、NameID 形式、署名証明書の有効期限と問題点	$0.001
check_oidc_provider	OpenID Connect のディスカバリーと JWKS：発行者の一致、HTTPS、PKCE S256、ID トークンのアルゴリズム、鍵のサイズ、証明書の有効期限	$0.001

開発者向けユーティリティ

ツール	返される内容	1 回あたりの料金
parse_cron	有効性、平易な英語での説明、任意のタイムゾーンでの前回および次回の実行時刻	$0.001
test_regex	位置とグループを含むすべての一致結果、および検索と置換。処理が終わらないパターンは 0.1 秒で停止します	$0.001
convert_color	HEX、RGB、HSL、HSV、CMYK、最適なテキスト色、コントラスト、パレット	$0.001
check_color_contrast	WCAG 2 のコントラスト比と AA／AAA の合否	$0.001
inspect_unicode	文字ごとのコードポイント、名前、バイト数、書記素数、正規化形式	$0.001
convert_timezone	オフセット、略称、夏時間の情報を含む、複数の IANA タイムゾーンでの時刻	$0.001
list_timezones	IANA タイムゾーン名。地域による絞り込みも可能です	$0.001

Hyperliquid の無期限先物市場データ

ツール	返される内容	1 回あたりの料金
hyperliquid_markets	マーク価格／オラクル価格、24 時間の変動率、時間単位および年率換算の資金調達率、建玉、取引高	$0.001
hyperliquid_funding_history	平均値と年率換算レートを含む、最大 30 日分の時間単位の資金調達率履歴	$0.001
hyperliquid_candles	1 分から 1 週間までの OHLCV ローソク足	$0.001

Hyperliquid のデータは、Hyperliquid が公開している市場データを利用しています。このサーバーは Hyperliquid と提携しておらず、返される情報は金融アドバイスではありません。

料金

Apify アカウントを通じて、成功したツール呼び出しごとにお支払いください。チェックおよびユーティリティツールは $0.001、 ページツールは $0.003 です。失敗した呼び出し（無効な URL、サイトによるブロック、タイムアウト）は無料で、明確なエラー理由を返します。

知っておくとよいこと

• ページはサーバーが送信する HTML から読み取られます。ブラウザーですべてをレンダリングするサイトでは、取得できるテキストがほとんどなく、その旨が warning フィールドに記載されます。
• 自動アクセスをブロックするサイトもあります。その場合、呼び出しは target_blocked を返し、料金は発生しません。
• 公開されている http／https アドレスのみを取得します。プライベートおよび内部アドレスへのアクセスは拒否されます。

このリポジトリについて

このリポジトリは、MCP サーバーをホストする Apify Actor のソースです。薄いコネクターとして、各ツールのリクエストを Web Content API に転送し、JSON の結果を返します。

.actor/        Apify Actor definition (Standby mode, MCP path /mcp, pay-per-event pricing)
src/main.py    MCP server (FastMCP, Streamable HTTP) and tool definitions
Dockerfile     Container image

自分で実行する必要はありません。上記のホストされたエンドポイントに接続してください。

ライセンス

MIT © Avalon Company