Разработка парсера цен для 1С

Требуется разработать автономный сервис для регулярного сбора розничных, оптовых и тендерных цен на продукты из пяти источников. Цель — создать MVP для стабильного сбора данных и их подготовки для загрузки в 1С. Аналитика будет реализована на следующем этапе.

Функционал модуля парсинга включает: 1. Сбор данных: розничные цены сетей (Магнит, Пятёрочка, Лента, ВкусВилл и др.) с пересчётом немодальных упаковок в цену за 1 кг; поиск муниципальных контрактов, скачивание вложений (Word, Excel, PDF) и парсинг таблиц с продуктами и ценами; сбор оптовых цен с фильтрацией по дате публикации и отсеиванием пустых цен. 2. Единый формат хранения: цена в руб./кг (с логированием исходной цены и единицы измерения), обязательные поля (название продукта, категория, регион, цена за кг, дата сбора, источник, ссылка на оригинал), хранение истории цен. 3. Подготовка к загрузке в 1С: автоматическая выгрузка данных в Excel/CSV заданной структуры (согласовывается с шаблоном 1С), возможность формирования выгрузки по периодам, регионам и источникам.

Технические требования: автономная работа по расписанию, логирование ошибок, отказоустойчивость при недоступности источников, конфигурируемость без переписывания кода (добавление новых источников или правка правил парсинга через файлы настроек).