Scrapling: Python-фреймворк для веб-скрейпинга: от одного запроса до масштабного обхода сайтов.
Python-фреймворк для веб-скрейпинга: от одного запроса до масштабного обхода сайтов.
Иллюстрация: GitHub
Главное в цифрах
- Звёзд на GitHub: 93,5 тыс.
- Язык: Python
- Лицензия: BSD-3-Clause
Чем полезно
Объединяет быстрые HTTP-запросы, stealth-браузеры, парсинг и параллельный обход в одной библиотеке. Есть пауза и возобновление, экспорт в JSON и CSV, а также MCP-сервер для ИИ-агентов.
Главные возможности
- Stealth-браузеры и обработка Cloudflare Turnstile
- Scrapy-подобный API пауков с паузой и возобновлением
- CSS, XPath и адаптивное отслеживание элементов
Для кого
Разработчики на Python, которые собирают данные с сайтов
Нашли ошибку или есть что добавить? Напишите редакции
Источник: GitHub
GitHub-находки
Такие новости первыми, в Telegram