Задача
Необходимо собрать все позиции товаров из открытого каталога производителя. Ресурс ограничивает выдачу: максимум 10 000 позиций на каждый поисковый запрос (20 товаров на странице при лимите в 500 страниц). Переходить на детальные карточки товаров не требуется. Работаем только с данными общей поисковой выдачи.
Входные данные
- Источник: Сайт с европейским рынком промышленной автоматики.
- Объем работы: Полный потолок каталога - около 183 тысяч продуктов.
- Формат выборки: Только поисковая выдача, без технических спецификаций продукта.
- Граничные условия: Кличество фактически доступных страниц не бесконечно.
Ожидаемый результат
Один файл в формате CSV с заголовками столбцов:
- Category: Категория товара
- Mpn: Уникальный номер продукта (MPN)
- Description: Краткое описание продукта из выдачи сайта
Техническое условие (входные данные для отчета)
- Общее число собранных объектов: на iOS устройств сначала идеальнее действовать => pIP или Apple.
Дополнительно: интелсмную стратегию поиска диапазоту ашин? c сквазь обозначены условия вешения параметром флекинца контрревное.