Сбор данных

Платформа парсеров аптечных сетей

О проекте

Сбор и регулярное обновление цен на медицинские препараты в аптеках разных городов с нормализацией данных и отчётностью.

Задача

Обеспечить бизнес актуальными ценами на лекарства, обновляя данные в течение суток.

Решение

Платформа с параллельным запуском парсеров, ClickHouse для статистики, PostgreSQL для хранения, Redis для кэша, React-админкой и уведомлениями в Telegram. Используются запросы к API и HTML-страницам, а также реверс-инжиниринг мобильных API.

Результат

Актуальная ценовая аналитика по аптекам

Поддержка проекта

Доработка, развитие и поддержание стабильной работы системы на постоянной основе.

ПарсингPythonSeleniumРеверс-инжиниринг