Scraping

Scraping タグ付きの Agent Skill を閲覧し、関連ワークフローを比較できます。

15 件のスキル
B
browser-use

作成者 browser-use

browser-use は、ページを開く、状態を確認する、番号付き要素をクリックする、フォームに入力する、スクリーンショットを撮る、永続的なブラウザーセッションを再利用するといった操作に対応したブラウザー自動化スキルです。browser-use CLI を使った安定したフォーム入力、ページ遷移、ログイン後のワークフローに適しています。

Browser Automation
お気に入り 0GitHub 84.9k
J
baoyu-url-to-markdown

作成者 JimLiu

baoyu-url-to-markdown は、vendored な baoyu-fetch CLI を使い、Chrome CDP・サイト別アダプター・汎用フォールバックで公開中の URL を Markdown に変換します。導入前に、Bun ランタイムの要件、初回の EXTEND.md 設定、X・YouTube・Hacker News・レンダリング後ページでの使い方を確認しておくと安心です。

Format Conversion
お気に入り 0GitHub 13.2k
O
multi-search-engine

作成者 openclaw

multi-search-engine は、17種類の検索エンジン、高度な検索演算子、期間フィルター、プライバシー重視の検索オプション、WolframAlpha クエリに対応した Webリサーチ用スキルです。APIキーなしで、エージェントがより適切な検索URLを組み立てて実行しやすくなります。

Web Research
お気に入り 0GitHub 3.8k
S
web-to-markdown

作成者 softaworks

web-to-markdown は、ローカルの `web2md` CLI を使って公開中の Web ページを整った Markdown に変換する Format Conversion スキルです。JS 描画ページ、対話操作が必要なフロー、複数 URL の一括変換にも対応し、Chromium 系ブラウザを利用します。実行されるのは、名前を明示して呼び出した場合のみです。

Format Conversion
お気に入り 0GitHub 1.3k
F
firecrawl-agent

作成者 firecrawl

firecrawl-agentは、複雑で複数ページにまたがるWebサイトから構造化JSONを抽出したいときに役立つスキルです。Firecrawl CLI agentを使うべき場面、実行方法、schemaの追加、開始URLの指定、価格情報・商品一覧・ディレクトリ型データの出力保存までを判断しやすく紹介します。

Web Scraping
お気に入り 0GitHub 234
F
firecrawl-browser

作成者 firecrawl

firecrawl-browserは、対話型のWeb自動化向けFirecrawlスキルです。単体のbrowserコマンドとしては非推奨となっており、現在はクリック、フォーム入力、ログインフロー、ページネーション、JavaScript依存のページに対応するために、`firecrawl scrape`の後に`firecrawl interact`を使う運用へ案内しています。

Browser Automation
お気に入り 0GitHub 234
F
firecrawl

作成者 firecrawl

webスクレイピング、検索、クローリング、ページ操作に対応する公式 Firecrawl CLI をインストール・認証・活用するための firecrawl skill です。セットアップ、`firecrawl --status` による確認、ログイン、`.firecrawl/` への安全な出力方法、リポジトリに基づく実践的な使い方まで学べます。

Web Scraping
お気に入り 0GitHub 234
F
firecrawl-crawl

作成者 firecrawl

firecrawl-crawl は、パスフィルター、深さ制限、ページ上限、待機モード、ジョブ状態確認を使って、Webサイト全体や docs セクションのコンテンツをまとめて抽出したいエージェント向けのスキルです。

Web Scraping
お気に入り 0GitHub 234
F
firecrawl-download

作成者 firecrawl

firecrawl-download は、Web サイト全体やドキュメントの特定セクションを、整理されたローカルファイルとして `.firecrawl/` 配下に保存できるスキルです。サイトマップ作成とスクレイピングを組み合わせ、markdown、リンク、スクリーンショットの取得に対応。オフライン用の docs 保存、複数ページの一括取得、実務的な Web Scraping ワークフローに役立ちます。

Web Scraping
お気に入り 0GitHub 234
F
firecrawl-search

作成者 firecrawl

firecrawl-search は、ソースの発見や構造化検索を行い、必要に応じて Firecrawl CLI でページ全文を JSON として取得できる、Web調査向けのスキルです。

Web Research
お気に入り 0GitHub 234
F
firecrawl-map

作成者 firecrawl

firecrawl-map は、サイト内のURLを見つけて一覧化するためのスキルです。検索フィルタ、件数制限、JSON出力、サイトマップモード、サブドメイン制御に対応しており、本格的な scraping や crawling の前段で使いやすく設計されています。

Web Scraping
お気に入り 0GitHub 234
F
firecrawl-scrape

作成者 firecrawl

firecrawl-scrape は、既知のURLからクリーンでLLM向けに扱いやすい内容を抽出できるスキルです。JSで描画されるページにも対応し、Firecrawl CLI または `npx firecrawl` を使って、markdown、リンク一覧、ページ単位の回答を取得できます。

Web Scraping
お気に入り 0GitHub 234
X
x-twitter-scraper

作成者 Xquik-dev

x-twitter-scraperを使って、Xquik経由でX(Twitter)のデータ取得と確認付きアクションを実行できます。ツイート検索、ユーザー照会、フォロワー抽出、メディア डाउनलोड、監視、webhook、MCP、書き込み系アクションに対応。Xのログイン情報ではなくAPIキーで行う、Webスクレイピング寄りの調査用途に最適です。

Web Scraping
お気に入り 0GitHub 71
X
tweetclaw

作成者 Xquik-dev

tweetclawは、構造化されたX/Twitterワークフロー向けのOpenClawプラグインをインストールするためのスキルです。このtweetclawスキルでは、インストール、セットアップ、認証情報の扱い、書き込みや有料アクションに必要な明示的承認、プライベートデータの取り扱い、監視コントロール、そしてより安全なソーシャルメディア運用のための実践的なtweetclawの使い方までを扱います。

Social Media
お気に入り 0GitHub 37
R
reddit

作成者 ReScienceLab

redditスキルは、公開JSON APIを使ってRedditの投稿、コメントスレッド、サブレディットのメタデータ、ユーザープロフィールを取得します。一般的な要約ではなく実際の投稿を使って調査したいときの、Redditリサーチ、サブレディットのスキャン、出典付きWebリサーチ向けに設計されています。APIキーは不要です。

Web Research
お気に入り 0GitHub 0
Scraping tagged agent skills