Web scraping

Ficha técnica

Supercharge your AI agents with data from the web and beyond. Building the library for superintelligence. 🔥

Projeto em TypeScript, veterano de 3 anos, disparando a 210 estrelas por dia. Licença AGPL-3.0, 10k forks, 620 issues abertas.

Issues

620

Forks

10k

Licença

AGPL-3.0

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.

Ficha técnica

Clone any website with one command using AI coding agents

Projeto em TypeScript, com 7 meses de estrada, disparando a 169 estrelas por dia. Licença MIT, 5,4k forks, 2 issues abertas.

Issues

2

Forks

5,4k

Licença

MIT

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.

Ficha técnica

Open-source Python library for AI browser agents, plus Browser Use Cloud: stealth browsers and a hosted agent API.

Projeto em Python, veterano de 2 anos, disparando a 165 estrelas por dia. Licença MIT, 13k forks, 563 issues abertas.

Issues

563

Forks

13k

Licença

MIT

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.

Ficha técnica

Stealth Chromium that passes every bot detection test. Drop-in Playwright replacement with source-level fingerprint patches. 50+ tests passed.

Projeto em Python, com 8 meses de estrada, disparando a 136 estrelas por dia. Licença MIT, 2,8k forks, 151 issues abertas.

Issues

151

Forks

2,8k

Licença

MIT

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.

Ficha técnica

🕷️ A Web Scraping framework that handles everything from a single request to a full-scale crawl! Don't be shy, join here: https://discord.gg/EMgGbDceNQ and follow here for daily tips and tricks: https://x.com/Scrapling_dev

Projeto em Python, veterano de 2 anos, disparando a 120 estrelas por dia. Licença BSD-3-Clause, 9,1k forks, 5 issues abertas.

Issues

5

Forks

9,1k

Licença

BSD-3-Clause

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.

Ficha técnica

Open-source web crawler and scraper for LLMs and AI agents: any website into clean, LLM-ready Markdown. Run it yourself, or use Crawl4AI Cloud with one key.

Projeto em Python, veterano de 2 anos, ganhando 96 estrelas por dia. Licença Apache-2.0, 8,9k forks, 263 issues abertas.

Issues

263

Forks

8,9k

Licença

Apache-2.0

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.

Ficha técnica

Python scraper based on AI

Projeto em Python, veterano de 3 anos, ganhando 32 estrelas por dia. Licença MIT, 3,3k forks, 21 issues abertas.

Issues

21

Forks

3,3k

Licença

MIT

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.

Ficha técnica

Best and simplest tool for website change detection, web page monitoring, and website change alerts. Perfect for tracking content changes, price drops, restock alerts, and website defacement monitoring—all for free or enjoy our SaaS plan!

Projeto em Python, veterano de 6 anos, ganhando 17 estrelas por dia. Licença Apache-2.0, 2,2k forks, 402 issues abertas.

Issues

402

Forks

2,2k

Licença

Apache-2.0

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.

Ficha técnica

Scrapy, a fast high-level web crawling & scraping framework for Python.

Projeto em Python, veterano de 17 anos, ganhando 11 estrelas por dia. Licença BSD-3-Clause, 12k forks, 217 issues abertas.

Issues

217

Forks

12k

Licença

BSD-3-Clause

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.

Ficha técnica

Crawlee—A web scraping and browser automation library for Node.js to build reliable crawlers. In JavaScript and TypeScript. Extract data for AI, LLMs, RAG, or GPTs. Download HTML, PDF, JPG, PNG, and other files from websites. Works with Puppeteer, Playwright, Cheerio, JSDOM, and raw HTTP. Both headful and headless mode. With proxy rotation.

Projeto em TypeScript, veterano de 10 anos, somando 7,1 estrela por dia. Licença Apache-2.0, 1,7k forks, 155 issues abertas.

Issues

155

Forks

1,7k

Licença

Apache-2.0

O que a gente usaria pra colocar esse projeto de pé sem chorar. Links de afiliado, pra você comparar nas duas lojas.