Web Scraping

データ処理 で Web Scraping に関連する Agent Skill を探し、近いワークフローや用途を比較できます。

10 skills
B
remote-browser

by browser-use

remote-browserは、サンドボックス環境のエージェントがBrowser Automation用のヘッドレスブラウザを操作するためのスキルです。ページを開く、状態を確認する、番号付き要素をクリックする、入力する、スクリーンショットを撮る、ローカルアプリやCDP対応ブラウザセッションに接続するといった操作に使えます。

Browser Automation
Favorites 0GitHub 84.9k
B
browser-use

by browser-use

browser-use は、ページを開く、状態を確認する、番号付き要素をクリックする、フォームに入力する、スクリーンショットを撮る、永続的なブラウザーセッションを再利用するといった操作に対応したブラウザー自動化スキルです。browser-use CLI を使った安定したフォーム入力、ページ遷移、ログイン後のワークフローに適しています。

Browser Automation
Favorites 0GitHub 84.9k
F
firecrawl-agent

by firecrawl

firecrawl-agentは、複雑で複数ページにまたがるWebサイトから構造化JSONを抽出したいときに役立つスキルです。Firecrawl CLI agentを使うべき場面、実行方法、schemaの追加、開始URLの指定、価格情報・商品一覧・ディレクトリ型データの出力保存までを判断しやすく紹介します。

Web Scraping
Favorites 0GitHub 234
F
firecrawl-browser

by firecrawl

firecrawl-browserは、対話型のWeb自動化向けFirecrawlスキルです。単体のbrowserコマンドとしては非推奨となっており、現在はクリック、フォーム入力、ログインフロー、ページネーション、JavaScript依存のページに対応するために、`firecrawl scrape`の後に`firecrawl interact`を使う運用へ案内しています。

Browser Automation
Favorites 0GitHub 234
F
firecrawl

by firecrawl

webスクレイピング、検索、クローリング、ページ操作に対応する公式 Firecrawl CLI をインストール・認証・活用するための firecrawl skill です。セットアップ、`firecrawl --status` による確認、ログイン、`.firecrawl/` への安全な出力方法、リポジトリに基づく実践的な使い方まで学べます。

Web Scraping
Favorites 0GitHub 234
F
firecrawl-crawl

by firecrawl

firecrawl-crawl は、パスフィルター、深さ制限、ページ上限、待機モード、ジョブ状態確認を使って、Webサイト全体や docs セクションのコンテンツをまとめて抽出したいエージェント向けのスキルです。

Web Scraping
Favorites 0GitHub 234
F
firecrawl-download

by firecrawl

firecrawl-download は、Web サイト全体やドキュメントの特定セクションを、整理されたローカルファイルとして `.firecrawl/` 配下に保存できるスキルです。サイトマップ作成とスクレイピングを組み合わせ、markdown、リンク、スクリーンショットの取得に対応。オフライン用の docs 保存、複数ページの一括取得、実務的な Web Scraping ワークフローに役立ちます。

Web Scraping
Favorites 0GitHub 234
F
firecrawl-search

by firecrawl

firecrawl-search は、ソースの発見や構造化検索を行い、必要に応じて Firecrawl CLI でページ全文を JSON として取得できる、Web調査向けのスキルです。

Web Research
Favorites 0GitHub 234
F
firecrawl-map

by firecrawl

firecrawl-map は、サイト内のURLを見つけて一覧化するためのスキルです。検索フィルタ、件数制限、JSON出力、サイトマップモード、サブドメイン制御に対応しており、本格的な scraping や crawling の前段で使いやすく設計されています。

Web Scraping
Favorites 0GitHub 234
F
firecrawl-scrape

by firecrawl

firecrawl-scrape は、既知のURLからクリーンでLLM向けに扱いやすい内容を抽出できるスキルです。JSで描画されるページにも対応し、Firecrawl CLI または `npx firecrawl` を使って、markdown、リンク一覧、ページ単位の回答を取得できます。

Web Scraping
Favorites 0GitHub 234