Web scraping в Python с использованием Scrapy и Splash
- Суть
- Создание инструментов-пауков для веб-скрейпинга и парсинга динамических сайтов с помощью Python, Scrapy и Splash
- На выходе
- Создавать собственные инструменты для парсинга веб-сайтов на Python; Извлекать данные с помощью XPath; Настраивать автоматизированный сбор данных с динамических JavaScript-сайтов; Сохранять спарсенные данные в базы данных и файлы различных форматов
- Навыки
- Python 3.6 · Scrapy 1.5 · Splash 2.0 · XPath · MongoDB · Настройка конвейеров (pipelines)
- Кому подойдёт
- Аналитики данных; Разработчики