Техническое задание: Парсинг каталога сайта

Суть проекта

Необходимо разработать скрипт для сбора данных из каталога товаров на крупном корпоративном сайте. Каталог имеет многоуровневую структуру (разделы, подразделы, категории).

Основные задачи

  • Обход всех разделов и подразделов каталога.
  • Сбор данных о товарах (название, артикул, характеристики, описание, изображения и т.д.).
  • Структурирование данных в удобном формате (например, CSV, JSON, Excel).
  • Обеспечение стабильности работы парсера и обработка ошибок.

Требования к исполнителю

  • Опыт парсинга сложных сайтов с JavaScript-рендерингом.
  • Умение обходить антибот-защиту (при необходимости).
  • Понимание структуры данных и умение работать с древовидными каталогами.
  • Предоставление чистого, читаемого кода с комментариями.

Что нужно предоставить по итогу

  • Рабочий скрипт для парсинга.
  • Собранную и структурированную базу данных.
  • Краткую документацию по запуску.

Поиск партнеров для привлечения клиентов на инженерную документацию

Предлагаю агентское вознаграждение за каждого приведенного клиента, заказавшего разработку исполнительной документации, ППР или технологических карт. Готов обсудить условия сотрудничества.