Scraping

Explore agent skills com a tag Scraping e compare workflows relacionados no diretorio.

15 skills
B
browser-use

por browser-use

browser-use é uma skill de automação de navegador para abrir páginas, inspecionar o estado, clicar em elementos indexados, preencher campos, tirar capturas de tela e reutilizar uma sessão persistente do navegador. Use para preencher formulários com mais confiabilidade, navegar e executar fluxos com login usando a CLI do browser-use.

Browser Automation
Favoritos 0GitHub 84.9k
J
baoyu-url-to-markdown

por JimLiu

baoyu-url-to-markdown converte URLs ativas em Markdown com uma CLI baoyu-fetch vendorizada, usando Chrome CDP, adaptadores de sites e fallback genérico. Veja os requisitos de runtime com Bun, a configuração inicial do EXTEND.md e como usar a skill com X, YouTube, Hacker News e páginas renderizadas.

Format Conversion
Favoritos 0GitHub 13.2k
O
multi-search-engine

por openclaw

multi-search-engine é uma skill de pesquisa na web com 17 mecanismos de busca, operadores avançados, filtros por tempo, opções focadas em privacidade e consultas ao WolframAlpha. Ela ajuda agentes a montar e executar URLs de busca melhores sem precisar de chaves de API.

Web Research
Favoritos 0GitHub 3.8k
S
web-to-markdown

por softaworks

web-to-markdown é uma skill de conversão de formato que transforma páginas web ao vivo em Markdown limpo por meio do CLI local `web2md`, usando um navegador da família Chromium para páginas renderizadas por JS, fluxos interativos e conversão em lote de URLs. Ela só é executada quando é chamada explicitamente pelo nome.

Format Conversion
Favoritos 0GitHub 1.3k
F
firecrawl-agent

por firecrawl

O firecrawl-agent ajuda a extrair JSON estruturado de sites complexos com várias páginas. Entenda quando usar, como executar o agente Firecrawl CLI, adicionar schemas, definir URLs iniciais e salvar saídas para extração de preços, produtos e dados em estilo diretório.

Web Scraping
Favoritos 0GitHub 234
F
firecrawl-browser

por firecrawl

firecrawl-browser é uma skill do Firecrawl para automação web interativa. Ela foi descontinuada como comando de navegador independente e agora orienta o uso de firecrawl scrape junto com firecrawl interact para cliques, formulários, fluxos de login, paginação e páginas com muito JavaScript.

Browser Automation
Favoritos 0GitHub 234
F
firecrawl

por firecrawl

Skill firecrawl para instalar, autenticar e usar a CLI oficial do Firecrawl para web scraping, busca, crawling e interação com páginas. Veja como configurar, usar `firecrawl --status`, fazer login, salvar saídas com segurança em `.firecrawl/` e aplicar padrões práticos de uso respaldados pelo repositório.

Web Scraping
Favoritos 0GitHub 234
F
firecrawl-crawl

por firecrawl

O firecrawl-crawl ajuda agentes a extrair conteúdo em massa de um site ou seção de documentação com filtros de caminho, limites de profundidade, limite de páginas, modo de espera e verificação do status do job.

Web Scraping
Favoritos 0GitHub 234
F
firecrawl-download

por firecrawl

firecrawl-download ajuda você a baixar um site ou uma seção de documentação em arquivos locais organizados dentro de .firecrawl/. Combina mapeamento do site e scraping, oferece suporte a markdown, links e capturas de tela, e é útil para manter cópias offline da documentação, capturar páginas em massa e viabilizar fluxos práticos de Web Scraping.

Web Scraping
Favoritos 0GitHub 234
F
firecrawl-search

por firecrawl

firecrawl-search é uma skill de pesquisa na web para encontrar fontes, fazer buscas estruturadas e, opcionalmente, extrair o conteúdo completo de páginas em JSON com o Firecrawl CLI.

Web Research
Favoritos 0GitHub 234
F
firecrawl-map

por firecrawl

A firecrawl-map ajuda agentes a descobrir e listar URLs de um site, com opções de filtro por busca, limites, saída em JSON, modos de sitemap e controle de subdomínios antes de um scraping ou crawling mais aprofundado.

Web Scraping
Favoritos 0GitHub 234
F
firecrawl-scrape

por firecrawl

O firecrawl-scrape ajuda a extrair conteúdo limpo e amigável para LLMs de URLs conhecidas, incluindo páginas renderizadas com JS. Use para capturar markdown, links ou respostas específicas da página com Firecrawl CLI ou `npx firecrawl`.

Web Scraping
Favoritos 0GitHub 234
X
x-twitter-scraper

por Xquik-dev

Use o x-twitter-scraper para recuperar dados do X (Twitter) e executar ações com confirmação via Xquik. Ele oferece suporte a busca de tweets, consulta de usuários, extração de seguidores, download de mídia, monitores, webhooks, MCP e ações de gravação. É mais indicado para pesquisa no estilo web scraping com chave de API, não para segredos de login do X.

Web Scraping
Favoritos 0GitHub 71
X
tweetclaw

por Xquik-dev

tweetclaw é o plugin instalável do OpenClaw para fluxos de trabalho estruturados no X/Twitter. Esta skill tweetclaw cobre instalação, configuração, limites de credenciais, aprovação explícita para gravações e ações pagas, tratamento de dados privados, controles de monitoramento e uso prático do tweetclaw para operações de mídia social mais seguras.

Social Media
Favoritos 0GitHub 37
R
reddit

por ReScienceLab

A skill reddit recupera posts do Reddit, threads de comentários, metadados de subreddits e perfis de usuários por meio da API JSON pública. Ela foi feita para pesquisa no Reddit, varredura de subreddits e pesquisa na web com base em fontes, quando você precisa de posts reais em vez de um resumo genérico. Não é საჭირო nenhuma chave de API.

Web Research
Favoritos 0GitHub 0
Scraping tagged agent skills