网页抓取

瀏覽 資料處理 下與 网页抓取 相關的 Agent Skill,並比較相近工作流、工具與使用情境。

41 個技能
A
data-scraper-agent

作者 affaan-m

data-scraper-agent 協助建立可重複執行的公開資料流程,用於網頁爬取、資料增補與儲存。它適合搭配 GitHub Actions 依排程監控工作、價格、新聞、repo、體育賽事與清單,並將結果輸出到 Notion、Sheets 或 Supabase。最適合持續追蹤,不適合一次性擷取。

网页抓取
收藏 0GitHub 156.1k
B
remote-browser

作者 browser-use

remote-browser 可讓受沙箱限制的代理控制無頭瀏覽器,執行 Browser Automation。你可以用它開啟頁面、檢查目前狀態、點擊帶索引的元素、輸入內容、擷取螢幕截圖,並連線到本機應用程式或支援 CDP 的瀏覽器工作階段。

瀏覽器自動化
收藏 0GitHub 84.9k
B
browser-use

作者 browser-use

browser-use 是一款用於瀏覽器自動化的技能,可開啟頁面、檢查目前狀態、點擊已編號元素、在欄位中輸入內容、擷取螢幕畫面,並重用持續性的瀏覽器工作階段。若你需要透過 browser-use CLI 穩定完成表單填寫、頁面導覽或登入後流程,這項技能很適合納入評估。

瀏覽器自動化
收藏 0GitHub 84.9k
C
zyte-api-automation

作者 ComposioHQ

zyte-api-automation 可協助代理程式透過 Composio Rube MCP 執行 Zyte API 工作流程:探索目前的工具 schema、檢查 zyte_api 連線,並以較少猜測完成 Web Scraping 任務。

网页抓取
收藏 0GitHub 67.5k
C
zenserp-automation

作者 ComposioHQ

zenserp-automation 可協助 agent 透過 Composio Rube MCP 執行 Zenserp tasks。可用它連接 Zenserp、先探索目前的 tool schemas,並收集 SERP data 以進行 SEO research。

Seo Research
收藏 0GitHub 67.5k
C
webscraping-ai-automation

作者 ComposioHQ

webscraping-ai-automation 是一個透過 Composio 的 Rube MCP 進行 Web Scraping 的 Claude skill,提供設定檢查、工具探索,以及以 schema 優先的使用指引。

网页抓取
收藏 0GitHub 67.5k
C
serpdog-automation

作者 ComposioHQ

serpdog-automation 可協助代理透過 Composio Rube MCP 執行 Serpdog 任務:探索最新工具 schema、檢查 serpdog 連線,並以較少猜測完成 SEO/SERP 研究工作流程。

Seo Research
收藏 0GitHub 67.5k
C
scrapingbee-automation

作者 ComposioHQ

scrapingbee-automation 可協助代理透過 Composio Rube MCP 執行 ScrapingBee 網頁爬取任務:先探索目前的工具 schema、檢查 ScrapingBee 連線,再執行更安全的工作流程。

网页抓取
收藏 0GitHub 67.5k
C
scrapingant-automation

作者 ComposioHQ

scrapingant-automation 可協助代理程式透過 Composio Rube MCP 執行 Scrapingant 任務:先探索即時工具 schema、檢查 scrapingant 連線,再執行正確工具。適合用於以 MCP 為基礎的 Web Scraping 工作流程,而不是獨立的爬蟲腳本。

网页抓取
收藏 0GitHub 67.5k
C
scrapfly-automation

作者 ComposioHQ

scrapfly-automation 可協助代理透過 Composio Rube MCP 執行 Scrapfly 網頁爬取任務,包含探索目前可用工具、檢查 Scrapfly connection,並避免使用過期的 schemas。

网页抓取
收藏 0GitHub 67.5k
C
scrapegraph-ai-automation

作者 ComposioHQ

scrapegraph-ai-automation skill 指南,協助你透過 Composio Rube MCP 使用 Scrapegraph AI:設定 MCP 連線、用 RUBE_SEARCH_TOOLS 探索目前的 schemas,並執行網頁爬取工作流程。

网页抓取
收藏 0GitHub 67.5k
C
PhantomBuster Automation

作者 ComposioHQ

PhantomBuster Automation 可協助 Claude 透過 Composio MCP 操作 PhantomBuster,用於列出 agents 與 scripts、監控配額、檢查執行紀錄,並支援受控的網頁資料擷取或潛在客戶開發流程。

网页抓取
收藏 0GitHub 67.5k
C
parsehub-automation

作者 ComposioHQ

parsehub-automation 是一份 Claude 技能指南,用於透過 Composio Rube MCP 執行 ParseHub 工作流程。內容涵蓋設定背景、RUBE_SEARCH_TOOLS 探索、連線檢查,以及 Web Scraping 任務的安全使用模式。

网页抓取
收藏 0GitHub 67.5k
C
hyperbrowser-automation

作者 ComposioHQ

hyperbrowser-automation 可協助代理透過 Composio Rube MCP 執行 Hyperbrowser 工作流程:先探索目前的工具 schema,確認 Hyperbrowser connection,接著執行瀏覽器自動化任務。

瀏覽器自動化
收藏 0GitHub 67.5k
C
Firecrawl Automation

作者 ComposioHQ

Firecrawl Automation 可協助 Claude Code 透過 Composio 執行 Firecrawl,用於擷取頁面、爬取網站、萃取結構化資料、批次處理 URL,並以有範圍且注意 credits 消耗的 workflow 建立網站結構地圖。

网页抓取
收藏 0GitHub 67.5k
C
diffbot-automation

作者 ComposioHQ

diffbot-automation 協助 Claude 透過 Composio Rube MCP 使用 Diffbot:探索最新 tool schemas、檢查 Diffbot connection,並安全執行結構化網頁資料任務。

网页抓取
收藏 0GitHub 67.5k
C
browseai-automation

作者 ComposioHQ

browseai-automation 可協助 Claude 透過 Composio Rube MCP 執行 Browse AI 工作流程;在執行前會要求進行工具探索、連線檢查,並使用最新 schema。

瀏覽器自動化
收藏 0GitHub 67.4k
C
brightdata-automation

作者 ComposioHQ

brightdata-automation 可協助代理程式透過 Composio Rube MCP 執行 Bright Data 工作流程:探索目前可用的工具 schemas、檢查 Bright Data 連線,並以較少猜測完成任務。

网页抓取
收藏 0GitHub 67.4k
C
Apify Automation

作者 ComposioHQ

Apify Automation 是一個 Claude skill,可透過 Composio 執行 Apify Actors:連接 MCP、執行同步或非同步 scraping jobs、擷取 datasets、建立 tasks,並查看 logs。

网页抓取
收藏 0GitHub 67.4k
C
agentql-automation

作者 ComposioHQ

agentql-automation 可協助 Claude 透過 Composio Rube MCP 執行 AgentQL 瀏覽器自動化,支援以 schema 優先的工具探索、連線檢查,以及更安全的執行步驟。

瀏覽器自動化
收藏 0GitHub 67.4k
A
browser-automation

作者 alirezarezvani

browser-automation 協助 agents 建立 Playwright 工作流程,適用於爬取、表單填寫、螢幕截圖、下載、session 處理與結構化資料擷取。內含 recipes、API references 與 helper scripts,面向正式環境的瀏覽器自動化,而非 E2E 測試。

瀏覽器自動化
收藏 0GitHub 22.2k
J
baoyu-url-to-markdown

作者 JimLiu

baoyu-url-to-markdown 可透過內建的 baoyu-fetch CLI,搭配 Chrome CDP、網站 adapter 與通用 fallback,將即時 URL 轉成 Markdown。使用前建議先確認 Bun 執行環境需求、首次 EXTEND.md 設定流程,以及在 X、YouTube、Hacker News 和需渲染頁面上的實際用法。

格式转换
收藏 0GitHub 13.2k
H
huggingface-datasets

作者 huggingface

使用 huggingface-datasets 技能來處理 Hugging Face Dataset Viewer API 工作流程:驗證資料集、解析 splits、預覽與分頁列資料、搜尋文字、套用篩選條件,並取得 parquet 連結或統計資訊。這是一份實用的 huggingface-datasets 指南,適合只讀的資料集探索。

网页抓取
收藏 0GitHub 10.4k
T
burpsuite-project-parser

作者 trailofbits

burpsuite-project-parser 會透過 Burp Suite Professional 與 burpsuite-project-file-parser extension,搜尋並擷取 Burp Suite 專案檔(.burp)中的資料。適合用來查找資安稽核發現、proxy history、site map 項目,以及在已擷取的 HTTP 流量中做 regex 搜尋。

安全稽核
收藏 0GitHub 5k