F
firecrawl-crawl
作者 firecrawl
firecrawl-crawl 可協助代理程式以批次方式擷取整個網站或文件區段的內容,並支援路徑篩選、深度限制、頁數上限、wait 模式,以及工作狀態查詢。
网页抓取
收藏 0GitHub 234
作者 firecrawl
firecrawl-crawl 可協助代理程式以批次方式擷取整個網站或文件區段的內容,並支援路徑篩選、深度限制、頁數上限、wait 模式,以及工作狀態查詢。
作者 firecrawl
firecrawl-download 可協助你把整個網站或文件區段下載成整理好的本機檔案,輸出到 `.firecrawl/` 目錄下。它結合網站地圖探索與內容擷取,支援 markdown、連結與截圖,適合用來建立離線文件副本、批次保存頁面,以及處理實務上的 Web Scraping 工作流程。
作者 firecrawl
firecrawl-search 是一個用於網頁研究的 skill,可協助找資料來源、執行結構化搜尋,並透過 Firecrawl CLI 視需要將完整頁面內容擷取為 JSON。
作者 firecrawl
firecrawl-map 可協助代理在深入 scraping 或 crawling 前,先探索並列出網站上的 URL,並支援搜尋篩選、筆數限制、JSON 輸出、sitemap 模式與子網域控制等選項。
作者 firecrawl
firecrawl-scrape 可從已知 URL 擷取乾淨、適合 LLM 使用的內容,也支援經 JavaScript 渲染的頁面。可透過 Firecrawl CLI 或 `npx firecrawl` 抓取 markdown、連結,或取得針對特定頁面的回答。