Scraping

Entdecke Agent Skills mit dem Tag Scraping und vergleiche verwandte Workflows im Verzeichnis.

15 Skills
B
browser-use

von browser-use

browser-use ist ein Skill für Browser-Automatisierung: Seiten öffnen, Status prüfen, indizierte Elemente anklicken, in Felder tippen, Screenshots erstellen und eine persistente Browser-Sitzung weiterverwenden. Geeignet für zuverlässiges Ausfüllen von Formularen, Navigation und eingeloggte Workflows mit der browser-use CLI.

Browser Automation
Favoriten 0GitHub 84.9k
J
baoyu-url-to-markdown

von JimLiu

baoyu-url-to-markdown wandelt Live-URLs mit einer eingebundenen baoyu-fetch-CLI per Chrome CDP, Site-Adaptern und generischem Fallback in Markdown um. Prüfen Sie die Bun-Laufzeitvoraussetzungen, die einmalige Einrichtung von EXTEND.md und die Nutzung für X, YouTube, Hacker News sowie gerenderte Seiten.

Format Conversion
Favoriten 0GitHub 13.2k
O
multi-search-engine

von openclaw

multi-search-engine ist eine Skill für Web-Recherche mit 17 Suchmaschinen, erweiterten Operatoren, Zeitfiltern, datenschutzorientierten Optionen und WolframAlpha-Abfragen. Sie hilft Agents, bessere Such-URLs ohne API-Keys zu erstellen und auszuführen.

Web Research
Favoriten 0GitHub 3.8k
S
web-to-markdown

von softaworks

web-to-markdown ist ein Skill für Formatkonvertierung, der Live-Webseiten über das lokale `web2md`-CLI in sauberes Markdown umwandelt. Für JS-gerenderte Seiten, interaktive Abläufe und die Batch-Konvertierung von URLs nutzt er einen Browser der Chromium-Familie. Er wird nur ausgeführt, wenn er ausdrücklich namentlich aufgerufen wird.

Format Conversion
Favoriten 0GitHub 1.3k
F
firecrawl-agent

von firecrawl

firecrawl-agent unterstützt bei der Extraktion von strukturiertem JSON aus komplexen Websites mit mehreren Seiten. Hier erfahren Sie, wann sich das Tool eignet, wie Sie den Firecrawl CLI-Agent ausführen, Schemas hinzufügen, Start-URLs festlegen und Ausgaben für Preise, Produkte und verzeichnisartige Datenextraktion speichern.

Web Scraping
Favoriten 0GitHub 234
F
firecrawl-browser

von firecrawl

firecrawl-browser ist ein Firecrawl-Skill für interaktive Web-Automatisierung. Als eigenständiger Browser-Befehl ist er veraltet und verweist jetzt auf die Nutzung von firecrawl scrape plus firecrawl interact für Klicks, Formulare, Login-Flows, Pagination und JavaScript-lastige Seiten.

Browser Automation
Favoriten 0GitHub 234
F
firecrawl

von firecrawl

firecrawl Skill zum Installieren, Authentifizieren und Nutzen der offiziellen Firecrawl CLI für Web-Scraping, Suche, Crawling und Seiteninteraktion. Erfahren Sie, wie Einrichtung, `firecrawl --status`, Login, sichere Dateiausgabe nach `.firecrawl/` und praxisnahe Nutzungsmuster laut Repository funktionieren.

Web Scraping
Favoriten 0GitHub 234
F
firecrawl-crawl

von firecrawl

firecrawl-crawl unterstützt Agenten dabei, Inhalte einer Website oder eines Docs-Bereichs in großem Umfang zu extrahieren – mit Pfadfiltern, Tiefenlimits, Seitenobergrenzen, Wait-Modus und Prüfungen des Job-Status.

Web Scraping
Favoriten 0GitHub 234
F
firecrawl-download

von firecrawl

firecrawl-download hilft dir dabei, eine Website oder einen Dokumentationsbereich als strukturierte lokale Dateien unter `.firecrawl/` zu speichern. Die Skill kombiniert Site-Mapping und Scraping, unterstützt Markdown, Links und Screenshots und eignet sich für Offline-Kopien von Doku, das Erfassen vieler Seiten auf einmal und praktische Web-Scraping-Workflows.

Web Scraping
Favoriten 0GitHub 234
F
firecrawl-search

von firecrawl

firecrawl-search ist eine Skill für Webrecherche, um Quellen zu finden, strukturierte Suchen auszuführen und optional vollständige Seiteninhalte mit Firecrawl CLI als JSON zu extrahieren.

Web Research
Favoriten 0GitHub 234
F
firecrawl-map

von firecrawl

firecrawl-map hilft Agents dabei, URLs auf einer Website zu finden und aufzulisten – mit Optionen für Suchfilter, Limits, JSON-Ausgabe, Sitemap-Modi und die Steuerung von Subdomains, bevor tieferes Scraping oder Crawling startet.

Web Scraping
Favoriten 0GitHub 234
F
firecrawl-scrape

von firecrawl

firecrawl-scrape hilft dabei, saubere, LLM-taugliche Inhalte aus bekannten URLs zu extrahieren, auch von JS-gerenderten Seiten. Verwende es, um Markdown, Links oder seitenspezifische Antworten mit Firecrawl CLI oder `npx firecrawl` auszulesen.

Web Scraping
Favoriten 0GitHub 234
X
x-twitter-scraper

von Xquik-dev

Verwende x-twitter-scraper, um X-(Twitter-)Daten und bestätigungspflichtige Aktionen über Xquik abzurufen. Unterstützt sind Tweet-Suche, Nutzerabfragen, Follower-Extraktion, Medien-Downloads, Monitore, Webhooks, MCP und Schreibaktionen. Am besten geeignet für Web-Scraping-artige Recherchen mit API-Schlüssel, nicht mit X-Login-Daten.

Web Scraping
Favoriten 0GitHub 71
X
tweetclaw

von Xquik-dev

tweetclaw ist das installierbare OpenClaw-Plugin für strukturierte X/Twitter-Workflows. Dieser tweetclaw Skill behandelt Installation, Setup, Credential-Grenzen, explizite Freigaben für Schreibzugriffe und kostenpflichtige Aktionen, den Umgang mit privaten Daten, Monitor-Steuerung und praktische tweetclaw Nutzung für sicherere Social-Media-Operationen.

Social Media
Favoriten 0GitHub 37
R
reddit

von ReScienceLab

Das reddit-Skill ruft Reddit-Posts, Kommentar-Threads, Subreddit-Metadaten und Nutzerprofile über die öffentliche JSON-API ab. Es ist für Reddit-Recherche, Subreddit-Scans und quellenbasierte Web-Recherche gedacht, wenn du echte Beiträge statt einer generischen Zusammenfassung brauchst. Es ist kein API-Schlüssel erforderlich.

Web Research
Favoriten 0GitHub 0
Scraping tagged agent skills