🎓Собираем данные с помощью Scrapy

В этом обзоре вам расскажут, как:
🔹Создать паука, выполняющего GET запросы,
🔹Извлекать данные из HTML документа,
🔹Обрабатывать и экспортировать данные.

🧠Читать статью

#Scrapy | Просто Python

🔥 Scrapy — Простой скрапинг сайтов

Scrapy является фреймворком, что прекрасно подойдет для скрапинга веб сайтов. Он без особых проблем справляется с самыми популярными случаями веб скрапинга, среди которых:
🔸Многопоточность;
🔸Веб-краулер для перехода от ссылке к ссылки;
🔸Извлечение данных;
🔸Проверка данных;
🔸Сохранение в другой формат/базу данных;
🔸Многое другое.

Главное отличие между Scrapy и другими популярными библиотеками, такими как Requests или BeautifulSoup, заключается в том, что он позволяет решать обычные задачи веб скрапинга при помощи самых элегантных solving.

К недостаткам Scrapy можно отнести и тот факт, что начать ему обучаться бывает довольно сложно.

#scrapy | Просто Python