Web scraping

Ficha técnica

Supercharge your AI agents with data from the web and beyond. Building the library for superintelligence. 🔥

Projeto em TypeScript, veterano de 2 anos, disparando a 209 estrelas por dia. Licença AGPL-3.0, 10k forks, 537 issues abertas.

Issues

537

Forks

10k

Licença

AGPL-3.0

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.

Ficha técnica

Clone any website with one command using AI coding agents

Projeto em TypeScript, com 7 meses de estrada, disparando a 173 estrelas por dia. Licença MIT, 5,3k forks, 2 issues abertas.

Issues

2

Forks

5,3k

Licença

MIT

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.

Ficha técnica

Stealth Chromium that passes every bot detection test. Drop-in Playwright replacement with source-level fingerprint patches. 30/30 tests passed.

Projeto em Python, com 8 meses de estrada, disparando a 139 estrelas por dia. Licença MIT, 2,7k forks, 239 issues abertas.

Issues

239

Forks

2,7k

Licença

MIT

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.

Ficha técnica

🕷️ An adaptive Web Scraping framework that handles everything from a single request to a full-scale crawl! Don't be shy, join here: https://discord.gg/EMgGbDceNQ and follow here for daily tips and tricks: https://x.com/Scrapling_dev

Projeto em Python, veterano de 2 anos, disparando a 119 estrelas por dia. Licença BSD-3-Clause, 8,9k forks, 14 issues abertas.

Issues

14

Forks

8,9k

Licença

BSD-3-Clause

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.

Ficha técnica

Open-source web crawler and scraper for LLMs and AI agents: any website into clean, LLM-ready Markdown. Run it yourself, or use Crawl4AI Cloud with one key.

Projeto em Python, veterano de 2 anos, ganhando 96 estrelas por dia. Licença Apache-2.0, 8,8k forks, 236 issues abertas.

Issues

236

Forks

8,8k

Licença

Apache-2.0

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.

Ficha técnica

Python scraper based on AI

Projeto em Python, veterano de 3 anos, ganhando 32 estrelas por dia. Licença MIT, 3,2k forks, 17 issues abertas.

Issues

17

Forks

3,2k

Licença

MIT

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.

Ficha técnica

The SDK to extract data and interact with any site on the web. Get started with Claude Code, Codex, Eve, Mastra, and more.

Projeto em TypeScript, veterano de 3 anos, ganhando 28 estrelas por dia. Licença MIT, 1,8k forks, 395 issues abertas.

Issues

395

Forks

1,8k

Licença

MIT

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.

Ficha técnica

Best and simplest tool for website change detection, web page monitoring, and website change alerts. Perfect for tracking content changes, price drops, restock alerts, and website defacement monitoring—all for free or enjoy our SaaS plan!

Projeto em Python, veterano de 6 anos, ganhando 17 estrelas por dia. Licença Apache-2.0, 2,1k forks, 395 issues abertas.

Issues

395

Forks

2,1k

Licença

Apache-2.0

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.

Ficha técnica

Scrapy, a fast high-level web crawling & scraping framework for Python.

Projeto em Python, veterano de 17 anos, ganhando 11 estrelas por dia. Licença BSD-3-Clause, 12k forks, 264 issues abertas.

Issues

264

Forks

12k

Licença

BSD-3-Clause

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.

Ficha técnica

Crawlee—A web scraping and browser automation library for Node.js to build reliable crawlers. In JavaScript and TypeScript. Extract data for AI, LLMs, RAG, or GPTs. Download HTML, PDF, JPG, PNG, and other files from websites. Works with Puppeteer, Playwright, Cheerio, JSDOM, and raw HTTP. Both headful and headless mode. With proxy rotation.

Projeto em TypeScript, veterano de 10 anos, somando 7,1 estrela por dia. Licença Apache-2.0, 1,7k forks, 143 issues abertas.

Issues

143

Forks

1,7k

Licença

Apache-2.0

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.