Задача

Необходимо развернуть и настроить Ubuntu Server 20 с установленным 3proxy и 4G-модемом Huawei для работы внутреннего скрипта по сбору позиций сайта в поисковой системе. В текущей конфигурации при любом запросе через этот сервер появляется капча, что делает сбор данных невозможным.

Цель работы

• Настроить программную конфигурацию сервера (sysctl, параметры ядра, параметры сети ОС) и 3proxy так, чтобы проходящие на модем пакеты были максимально неотличимы от пакетов обычного человеческого пользователя мобильного интернета (Android/iPhone c сотовых сетей).
• Обеспечить стабильный парсинг позиций сайта по ключевым запросам с базы Automation Suite, не вызывая защиту и капчу на сотнях запросов под поряд.

Требования к исполнителю

• Глубокое понимание сетевых протоколов (TCP/IP, IP headers, TTL, MSS, Tuning Linux Network Stack).
• Опыт работы с 3proxy, модулями парсинга в подобных конвейерах.
• Понимание специфики мобильных IP-мордз и профилей клиентов 4G LTE-провайдера.
• Умение выявить и устранить аномалии в сниферафтах, которые идентифицируются проверкой со стороны антибот-системы (CAS).

Условия работы

• Все данные и настройщики документы строго конфиденциально.
• Контроль времени: поэтапная приема результатов. При схожджэжжении сути требуется минимальное вмешательство право-легируем до конечного блӧ-эцпріиложже/премѝсов без капч.
• За успешную финальную инлегивизуильно результам - кворк закрывается с бонусом от успеха.

Требуемый фреслен-нод: хо-ей специни в ЛП синих-люсспециалиста нигаданий от ИИ-реженера.