Парсер цен
Цель проекта - разработать парсер сайтов и его админку в Google Spread Sheets.
Google таблицы отлично подошли в качестве интерфейса для админки парсера. В разных вкладках мы сделали возможность указать ссылки на товары, селекторы цен, настройки прокси и почтовые адреса, на которые требуется отправить результат парсинга. Мы так же встроили ротацию прокси и режим headless browser, где обычного парсинга было недостаточно. С помощью разработанного парсера клиент производит мониторинг ежедневно 13-ти сайтов. Парсер производит 45 864 запросов каждый день.
Клиент
ООО Делонги
Модель сотрудничества
Оплата за проект
Услуги
Разработка ТЗ,
Разработка веб-приложения,
Тестирование
Команда
Разработчик - Ропотан Дмитрий
Тестировщик - Лобода Николай
Руководитель проекта - Лобода Николай
Технологии
Docker, NodeJS, Typescript, Nightmare, Cheerio
Сроки работ
1 месяц
В результате работы парсера на указанные почтовые адреса приходит Excel файл с ценами и ссылками на страницы, где эти цены были найдены.
