scraptio

Scraptio

Scraptioは、ウェブスクレイピングと自動化のプラットフォームです。主に開発者やデータアナリストが、ウェブサイトからデータを抽出したり、ウェブ上のタスクを自動化したりできます。

公式ドキュメント：https://scraptio.readthedocs.io/

Scraptioの概要

• スクレイピング
  • 抽出ルール
• 抽出ルール
• スケジュール
• 通知
• スクレイピングデータ
• 連携

必要に応じてアクション名とパラメーターを使用してください。

Scraptioを使う

このスキルでは、Membrane CLIを使用してScraptioを操作します。Membraneが認証と認証情報の更新を自動的に処理するため、認証の仕組みではなく連携ロジックに集中できます。

CLIをインストールする

ターミナルからmembraneを実行できるよう、Membrane CLIをインストールします。

npm install -g @membranehq/cli@latest

認証

membrane login --tenant --clientName=<agentType>

インタラクティブモードが利用できるかどうかに応じて、ブラウザーが開くか、認証URLがコンソールに表示されます。

ヘッドレス環境： コマンドを実行すると認証URLが表示されます。ユーザーにブラウザーで開くよう依頼してください。ログイン完了後にコードが表示されたら、次のコマンドで完了します。

membrane login complete <code>

任意のコマンドに--jsonを追加すると、機械可読なJSON形式で出力されます。

エージェントの種類：claude、openclaw、codex、warp、windsurfなど。これらは、利用するツールをハーネスに最適化するために使用されます。

Scraptioに接続する

membrane connection ensureを使用すると、アプリのURLまたはドメインから接続を検索または作成できます。

membrane connection ensure "https://scraptio.com/" --json

ユーザーはブラウザーで認証を完了します。出力には新しい接続IDが含まれます。

これが、接続を取得する最速の方法です。URLはドメインに正規化され、既知のアプリと照合されます。アプリが見つからない場合は、新たに作成され、コネクターが自動的に構築されます。

返された接続のstate: "READY"の場合は、ステップ2に進んでください。

1b. 接続の準備ができるまで待つ

接続がBUILDING状態の場合、準備ができるまでポーリングします。

npx @membranehq/cli connection get <id> --wait --json

--waitフラグを指定すると、状態が変わるまで（最大--timeout秒、既定値は30秒）ロングポーリングします。stateがBUILDING以外になるまでポーリングを続けてください。

結果の状態に応じて、次に行うことが決まります。

• READY — 接続のセットアップが完了しています。ステップ2に進んでください。

• CLIENT_ACTION_REQUIRED — ユーザーまたはエージェントによる操作が必要です。clientActionオブジェクトに必要な操作が記述されています。

  • clientAction.type — 必要な操作の種類です。
    • "connect" — ユーザーによる認証が必要です（OAuth、APIキーなど）。初回認証と、切断された接続の再認証が該当します。
    • "provide-input" — 追加情報が必要です（例：接続するアプリ）。
  • clientAction.description — 必要な操作についての、人が読める説明です。
  • clientAction.uiUrl（任意）— ユーザーが操作を完了できる、あらかじめ用意されたUIのURLです。存在する場合はユーザーに提示してください。
  • clientAction.agentInstructions（任意）— AIエージェントがプログラムで操作を進めるための手順です。

  ユーザーが操作を完了した後（例：ブラウザーで認証を完了した後）、membrane connection get <id> --jsonで再度ポーリングし、状態がREADYに変わったか確認してください。

• CONFIGURATION_ERRORまたはSETUP_FAILED — 問題が発生しました。詳細はerrorフィールドを確認してください。

アクションを検索する

実行したい操作を自然言語で記述して検索します。

membrane action list --connectionId=CONNECTION_ID --intent "QUERY" --limit 10 --json

アクションは必ず、特定の接続のコンテキストで検索してください。

各結果にはid、name、description、inputSchema（アクションが受け取るパラメーター）、outputSchema（アクションが返す内容）が含まれます。

よく使われるアクション

npx @membranehq/cli@latest action list --intent=QUERY --connectionId=CONNECTION_ID --jsonを使用して、利用可能なアクションを確認します。

アクションを実行する

membrane action run <actionId> --connectionId=CONNECTION_ID --json

JSONパラメーターを渡すには、次のようにします。

membrane action run <actionId> --connectionId=CONNECTION_ID --input '{"key": "value"}' --json

結果はレスポンスのoutputフィールドに含まれます。

プロキシリクエスト

利用可能なアクションでユースケースに対応できない場合は、Membrane のプロキシ経由で Scraptio API に直接リクエストを送信できます。Membrane は指定したパスにベース URL を自動的に付加し、認証ヘッダーを適切に挿入します。認証情報の有効期限が切れた場合も、透過的に更新されます。

membrane request CONNECTION_ID /path/to/endpoint

よく使うオプション：

フラグ	説明
-X, --method	HTTP メソッド（GET、POST、PUT、PATCH、DELETE）。デフォルトは GET です
-H, --header	リクエストヘッダーを追加します（複数回指定可能）。例：-H "Accept: application/json"
-d, --data	リクエストボディ（文字列）
--json	JSON ボディを送信し、Content-Type: application/json を設定する簡易オプションです
--rawData	処理を行わず、ボディをそのまま送信します
--query	クエリ文字列パラメーター（複数回指定可能）。例：--query "limit=10"
--pathParam	パスパラメーター（複数回指定可能）。例：--pathParam "id=123"

ベストプラクティス

• 外部アプリとの通信には、常に Membrane を優先してください — Membrane は認証、ページネーション、エラー処理が組み込まれた事前構築済みのアクションを提供します。トークンの消費を抑え、より安全に通信できます
• 実装前にアクションを確認してください — membrane action list --intent=QUERY を実行し（QUERY は目的に置き換えてください）、カスタム API 呼び出しを作成する前に既存のアクションを探してください。事前構築済みのアクションは、ページネーション、フィールドのマッピング、通常の API 呼び出しでは対応できない例外ケースを処理します
• 認証情報の管理は Membrane に任せてください — API キーやトークンをユーザーに尋ねないでください。代わりに接続を作成してください。Membrane がサーバー側で認証のライフサイクル全体を管理するため、ローカルにシークレットを保存する必要はありません