Техническое задание: Разработка парсера данных
Цель проекта
Создание программного решения для сбора и систематизации информации из двух различных онлайн-источников в единую табличную форму.
Основные задачи
- Реализовать модуль для парсинга данных с сайта, содержащего нормативно-техническую документацию.
- Разработать модуль для выполнения поисковых запросов через публичную поисковую систему и извлечения результатов.
- Обеспечить полуавтоматический режим работы с возможностью контроля процесса.
- Организовать сохранение собранных данных в структурированную таблицу (например, Excel или CSV).
- Инструмент должен быть надежным и корректно обрабатывать структуру целевых сайтов.
Требования к реализации
- Решение может быть реализовано в виде скрипта или приложения.
- Необходимо предусмотреть обработку ошибок (например, изменение структуры сайта, проблемы с подключением).
- Код должен быть читаемым и сопровождаемым.
- Все чувствительные данные (адреса, учетные записи) должны быть вынесены в конфигурационные файлы.
Результат работы
Готовое рабочее решение, исходный код и краткая инструкция по запуску и настройке.