Web Scraping

Kham pha Agent Skill cho Web Scraping trong Xu ly du lieu va so sanh workflow, cong cu va tinh huong lien quan.

41 skills
A
data-scraper-agent

bởi affaan-m

data-scraper-agent giúp xây dựng một pipeline dữ liệu công khai có thể lặp lại cho web scraping, làm giàu dữ liệu và lưu trữ. Skill này được thiết kế để theo dõi theo lịch các job, giá cả, tin tức, repo, thể thao và danh sách bằng GitHub Actions, với đầu ra đẩy tới Notion, Sheets hoặc Supabase. Phù hợp nhất cho việc theo dõi liên tục, không phải trích xuất một lần.

Web Scraping
Yêu thích 0GitHub 156.1k
B
remote-browser

bởi browser-use

remote-browser giúp các agent chạy trong môi trường sandbox điều khiển trình duyệt headless cho Browser Automation. Dùng để mở trang, kiểm tra trạng thái, nhấp vào phần tử theo chỉ mục, nhập liệu, chụp ảnh màn hình và kết nối với ứng dụng cục bộ hoặc các phiên trình duyệt dùng CDP.

Browser Automation
Yêu thích 0GitHub 84.9k
B
browser-use

bởi browser-use

browser-use là skill tự động hóa trình duyệt dùng để mở trang, kiểm tra trạng thái, nhấp vào các phần tử theo chỉ mục, nhập liệu vào trường, chụp màn hình và tái sử dụng phiên trình duyệt liên tục. Phù hợp cho điền biểu mẫu ổn định, điều hướng và các quy trình cần đăng nhập bằng browser-use CLI.

Browser Automation
Yêu thích 0GitHub 84.9k
C
zyte-api-automation

bởi ComposioHQ

zyte-api-automation giúp agent chạy các workflow Zyte API qua Composio Rube MCP bằng cách khám phá schema công cụ hiện tại, kiểm tra kết nối zyte_api và thực thi các tác vụ Web Scraping với ít phải phỏng đoán hơn.

Web Scraping
Yêu thích 0GitHub 67.5k
C
zenserp-automation

bởi ComposioHQ

zenserp-automation giúp agent chạy các tác vụ Zenserp thông qua Composio Rube MCP. Dùng skill này để kết nối Zenserp, khám phá schema công cụ hiện tại trước, rồi thu thập dữ liệu SERP phục vụ nghiên cứu SEO.

Seo Research
Yêu thích 0GitHub 67.5k
C
webscraping-ai-automation

bởi ComposioHQ

webscraping-ai-automation là một Claude skill dành cho Web Scraping thông qua Rube MCP của Composio, kèm kiểm tra thiết lập, khám phá công cụ và hướng dẫn sử dụng ưu tiên schema.

Web Scraping
Yêu thích 0GitHub 67.5k
C
serpdog-automation

bởi ComposioHQ

serpdog-automation giúp agent chạy các tác vụ Serpdog qua Composio Rube MCP bằng cách khám phá schema công cụ hiện tại, kiểm tra kết nối serpdog và thực thi các workflow nghiên cứu SEO/SERP với ít phải phỏng đoán hơn.

Seo Research
Yêu thích 0GitHub 67.5k
C
scrapingbee-automation

bởi ComposioHQ

scrapingbee-automation giúp agent chạy các tác vụ web scraping của ScrapingBee thông qua Composio Rube MCP bằng cách trước tiên khám phá schema công cụ hiện tại, kiểm tra kết nối ScrapingBee, rồi thực thi workflow an toàn hơn.

Web Scraping
Yêu thích 0GitHub 67.5k
C
scrapingant-automation

bởi ComposioHQ

scrapingant-automation giúp agent chạy các tác vụ Scrapingant thông qua Composio Rube MCP bằng cách trước tiên khám phá schema công cụ đang hoạt động, kiểm tra kết nối scrapingant, rồi thực thi đúng công cụ. Phù hợp cho quy trình Web Scraping dựa trên MCP, không dành cho các script scraper độc lập.

Web Scraping
Yêu thích 0GitHub 67.5k
C
scrapfly-automation

bởi ComposioHQ

scrapfly-automation giúp agent chạy các tác vụ web scraping của Scrapfly thông qua Composio Rube MCP bằng cách khám phá các công cụ hiện có, kiểm tra kết nối Scrapfly và tránh dùng schema lỗi thời.

Web Scraping
Yêu thích 0GitHub 67.5k
C
scrapegraph-ai-automation

bởi ComposioHQ

Hướng dẫn skill scrapegraph-ai-automation để sử dụng Scrapegraph AI qua Composio Rube MCP: thiết lập kết nối MCP, khám phá schema hiện tại bằng RUBE_SEARCH_TOOLS và chạy các workflow web scraping.

Web Scraping
Yêu thích 0GitHub 67.5k
C
PhantomBuster Automation

bởi ComposioHQ

PhantomBuster Automation giúp Claude vận hành PhantomBuster thông qua Composio MCP để liệt kê agents và scripts, theo dõi hạn mức, kiểm tra các lần chạy, đồng thời hỗ trợ những quy trình web scraping hoặc tạo lead có kiểm soát.

Web Scraping
Yêu thích 0GitHub 67.5k
C
parsehub-automation

bởi ComposioHQ

parsehub-automation là hướng dẫn skill cho Claude để chạy các workflow ParseHub thông qua Composio Rube MCP. Nội dung bao gồm bối cảnh thiết lập, khám phá bằng RUBE_SEARCH_TOOLS, kiểm tra kết nối và các mẫu sử dụng an toàn cho tác vụ Web Scraping.

Web Scraping
Yêu thích 0GitHub 67.5k
C
hyperbrowser-automation

bởi ComposioHQ

hyperbrowser-automation giúp agent chạy các workflow Hyperbrowser thông qua Composio Rube MCP bằng cách trước hết khám phá schema công cụ hiện tại, kiểm tra kết nối Hyperbrowser, rồi thực thi các tác vụ tự động hóa trình duyệt.

Browser Automation
Yêu thích 0GitHub 67.5k
C
Firecrawl Automation

bởi ComposioHQ

Firecrawl Automation giúp Claude Code chạy Firecrawl thông qua Composio để scrape trang, crawl website, trích xuất dữ liệu có cấu trúc, xử lý URL hàng loạt và lập bản đồ cấu trúc site bằng các workflow có phạm vi rõ ràng, chú ý đến mức dùng credit.

Web Scraping
Yêu thích 0GitHub 67.5k
C
diffbot-automation

bởi ComposioHQ

diffbot-automation giúp Claude sử dụng Diffbot thông qua Composio Rube MCP bằng cách khám phá schema công cụ hiện tại, kiểm tra kết nối Diffbot và chạy các tác vụ dữ liệu web có cấu trúc một cách an toàn.

Web Scraping
Yêu thích 0GitHub 67.5k
C
browseai-automation

bởi ComposioHQ

browseai-automation giúp Claude chạy các workflow Browse AI thông qua Composio Rube MCP, với yêu cầu bắt buộc về khám phá công cụ, kiểm tra kết nối và dùng schema hiện tại trước khi thực thi.

Browser Automation
Yêu thích 0GitHub 67.4k
C
brightdata-automation

bởi ComposioHQ

brightdata-automation giúp agent chạy các workflow Bright Data qua Composio Rube MCP bằng cách khám phá schema công cụ hiện tại, kiểm tra kết nối Bright Data và thực thi tác vụ với ít phỏng đoán hơn.

Web Scraping
Yêu thích 0GitHub 67.4k
C
Apify Automation

bởi ComposioHQ

Apify Automation là một Claude skill để chạy Apify Actors qua Composio: kết nối MCP, chạy job scraping đồng bộ hoặc bất đồng bộ, lấy dataset, tạo task và kiểm tra log.

Web Scraping
Yêu thích 0GitHub 67.4k
C
agentql-automation

bởi ComposioHQ

agentql-automation giúp Claude chạy tự động hóa trình duyệt AgentQL thông qua Composio Rube MCP, với khám phá công cụ theo schema, kiểm tra kết nối và các bước thực thi an toàn hơn.

Browser Automation
Yêu thích 0GitHub 67.4k
A
browser-automation

bởi alirezarezvani

browser-automation giúp agent xây dựng Playwright workflows cho scraping, điền biểu mẫu, chụp màn hình, tải xuống, xử lý phiên và trích xuất dữ liệu có cấu trúc. Bao gồm công thức, tài liệu tham chiếu API và helper scripts cho browser automation trong môi trường production, không phải E2E testing.

Browser Automation
Yêu thích 0GitHub 22.2k
J
baoyu-url-to-markdown

bởi JimLiu

baoyu-url-to-markdown chuyển URL đang hoạt động thành Markdown bằng CLI baoyu-fetch đi kèm, sử dụng Chrome CDP, adapter theo từng trang và cơ chế dự phòng chung. Tìm hiểu yêu cầu Bun runtime, thiết lập EXTEND.md cho lần dùng đầu, và cách dùng với X, YouTube, Hacker News cùng các trang đã render.

Format Conversion
Yêu thích 0GitHub 13.2k
H
huggingface-datasets

bởi huggingface

Dùng skill huggingface-datasets cho các quy trình với Hugging Face Dataset Viewer API để xác thực dataset, xử lý split, xem trước và phân trang các hàng, tìm kiếm văn bản, áp dụng bộ lọc, và lấy liên kết parquet hoặc thống kê. Đây là hướng dẫn thực dụng về huggingface-datasets cho việc khám phá dataset chỉ đọc.

Web Scraping
Yêu thích 0GitHub 10.4k
T
burpsuite-project-parser

bởi trailofbits

burpsuite-project-parser giúp tìm kiếm và trích xuất dữ liệu từ file dự án Burp Suite (.burp) bằng Burp Suite Professional và extension burpsuite-project-file-parser. Hãy dùng skill này để rà soát phát hiện kiểm tra bảo mật, lịch sử proxy, các mục site map, và tìm kiếm regex trên lưu lượng HTTP đã ghi lại.

Security Audit
Yêu thích 0GitHub 5k