Техническое задание на разработку парсера объявлений

Цель проекта

Создание высоконагруженной системы мониторинга, которая отслеживает появление новых товаров на крупнейшей российской доске объявлений в реальном времени и мгновенно уведомляет пользователей.

Основные требования к системе

1. Функционал парсера

• Пользователь вставляет ссылку на конкретную категорию и город.
• Система начинает непрерывный мониторинг на предмет появления новых товаров.
• При обнаружении нового товара отправляет уведомление в Telegram-бота.
• В уведомлении передается: ссылка на товар, цена, название и другие ключевые параметры.

2. Критически важные технические требования

• Обход ограничений без использования прокси: система должна работать стабильно 24/7 без закупки дорогостоящих прокси. Необходимо реализовать решение на основе кук, сессий, кэширования или подбора корректных запросов для избежания блокировок.
• Высокая скорость: задержка между публикацией товара и отправкой уведомления должна составлять 0-1 минуту (как у конкурентов).
• Высокая нагрузка: система должна стабильно обслуживать минимум 150 пользователей одновременно, у каждого будет своя уникальная ссылка для парсинга.
• Интенсивность запросов: в среднем ~10 запросов в секунду на каждого клиента. Архитектура должна это выдерживать.

3. Этапы работ и условия

• Этап 1: Разработка стабильного и быстрого парсера с обходом всех ограничений.
• Этап 2: Поддержка и гарантия работоспособности софта после сдачи.
• Этап 3: Передача полного исходного кода заказчику.
• Этап 4: Доработка проекта: создание простой онлайн-кассы, админ-панели и Telegram-бота (детали уточняются после реализации парсера).

4. Коммерческие условия

• Оплата делится на две части: единовременная оплата за создание системы и ежемесячная оплата за её техническую поддержку.
• Срок реализации основного модуля (парсера) - до 4 дней.
• Рассматривается долгосрочное сотрудничество с исполнителем.

Ожидаемый результат

Надежная, масштабируемая и экономичная система мониторинга, способная конкурировать с существующими аналогами по скорости и стабильности, но с минимальными эксплуатационными расходами.