Задача

Требуется разработать парсер для сбора данных об играх в Steam. Парсер должен собирать базовую информацию (AppID, SubID, названия, версии) и сведения о скидках и ценах для нескольких регионов.

Ключевые требования

  • Сбор AppID, SubID, названий игр, а также сведений о версиях Steam.
  • Извлечение данных о ценах в разных валютах (на основе выбранных регионов).
  • Фиксация информации об активных скидках.
  • Формат вывода данных для последующей интеграции (например, CSV, Excel или база данных).

kДополнительная информация

Приветствуется опыт работы с сервисом. Желательно (но не обязательно) использование подхода, обеспечивающего стабильность сбора данных по большому каталогу игр.

Настройка robots.txt для ИИ-ботов на Bitrix

Требуется отредактировать файл robots.txt на сайте под управлением Bitrix, добавив правила, разрешающие сканирование страниц для поисковых систем на основе искусственного интеллекта (например, ChatGPT, Perplexity и других ИИ-ботов).