Open Web Unlocker — Fetchスキル

Open Web Unlockerはウェブページを取得し、クリーンなマークダウン、生のHTML、または構造化JSONを返します。静的ページ、JavaScriptレンダリングページ、アンチボットチャレンジ、検索エンジン結果に対応しており、すべて単一のCLIコマンドでインストール不要です。

クイックスタート

bunx open-web-unlocker fetch <url>

Bun(bunx)が推奨されます。Node(npx)も動作します。

フォーマット選択

bunx open-web-unlocker fetch <url> --format markdown   # デフォルト
bunx open-web-unlocker fetch <url> --format json
bunx open-web-unlocker fetch <url> --format html

フォーマットの選択:

フォーマット	使用場面
markdown	デフォルト。ナビゲーション/フッター/定型要素を削除したクリーンなコンテンツ。ページの閲覧または要約に最適です。
json	タイトル、著者、価格など、構造化された抽出フィールドが必要な場合
html	すべての要素を含む完全な生ページが必要な場合

50以上のサイト固有パーサーにより、一般的なドメインに対して高品質のマークダウンとJSONが生成されます。パーサーがないページはジェネリック抽出にフォールバックします。ノイズがより多く含まれる場合があります。

検索エンジン

検索結果ページを直接取得します — Open Web Unlockerはそれらを構造化された結果にパースします:

bunx open-web-unlocker fetch "https://search.brave.com/search?q=query"
bunx open-web-unlocker fetch "https://www.bing.com/search?q=query"
bunx open-web-unlocker fetch "https://duckduckgo.com/?q=query"

Googleはサポートされていません。

タイムアウト

bunx open-web-unlocker fetch <url> --timeout 45000

ストラテジーごとのデフォルトタイムアウト: fetch約8秒、ブラウザ約15秒。低速またはJavaScript処理が多いページの場合は、--timeoutを増やしてください。