Scrapling — это фреймворк для веб-скрапинга на Python, который объединяет в одной библиотеке быстрые HTTP-запросы, скрытые браузеры, мощный парсинг и параллельное сканирование.

Скрапируйте статические страницы, рендерите JavaScript, взаимодействуйте с веб-сайтами и извлекайте данные из API-вызовов. Создавайте краулеры с возможностью повторного использования сессий, ротацией прокси, автоматическими повторными попытками, паузой/возобновлением и встроенным экспортом данных.

Используйте его из Python, терминала или своего ИИ-агента через сервер MCP и агентский навык. Scrapling охватывает весь процесс парсинга — от извлечения нескольких полей до сбора данных со всего сайта в виде чистого Markdown.

Github Community