Scrapy для новичков
- Суть
- Автоматический сбор и парсинг данных с веб-ресурсов в промышленных масштабах с использованием Scrapy.
- Уровень
- с нуля
- На выходе
- Создавать мощных веб-пауков на Scrapy; Очищать данные с веб-страниц; Настраивать прокси и User-Agents для обхода блокировок; Сохранять извлеченные данные в структурированные форматы CSV, XML, JSON; Использовать CSS и XPath селекторы для парсинга сайтов
- Навыки
- Scrapy · CSS-селекторы · XPath · Ротация User-Agents · Настройка прокси · Экспорт данных в CSV, XML, JSON · Работа с базами данных
- Кому подойдёт
- Те, кто владеет Python на базовом уровне и хочет применять парсинг
- Знать заранее
- Владение Python на базовом уровне