Scraping Tech Lead (Web scraping & Anti-bot)

от 500 000 руб. до вычета налогов
Опыт работы: Более 6 лет
График работы: Удаленная работа
Занятость: Полная занятость
Компания: Инсайдерлабс
Адрес: показать на карте
Web Scraping & Anti-Bot (hands-on, production)

  • Реальный опыт промышленного web scraping на большом масштабе (миллионы страниц / запросов в сутки)

  • Практический опыт обхода современных anti-bot систем, а не только ротации прокси

  • Управление жизненным циклом сессий, поведенческая консистентность, стабильность fingerprint’ов

  • Работа с CAPTCHA на уровне архитектуры, а не «подключили сервис и забыли»

Сеть и fingerprinting

  • Глубокое понимание HTTP/2, TLS-handshake, JA3 / JA4 fingerprinting

  • Умение воспроизводить, модифицировать и маскировать сетевые fingerprint’ы

  • Понимание блокировок на уровне ISP / ASN и способов их обхода

Browser internals

  • Глубокое понимание Chromium / browser stack, CDP, пайплайн выполнения JS

  • WebRTC, canvas, audio, fonts, timezone fingerprinting

  • Методы детекта headless-браузеров и контрмеры

Архитектура и масштаб

  • Проектирование scraping-платформ с разделением data-plane / control-plane

  • Распределённые краулеры, адаптивный rate-control, детект банов, retry-стратегии

  • Проектирование систем, устойчивых к эскалации защиты со стороны сайтов

Backend
  • Async Python (asyncio, aiohttp) в проде на больших нагрузках
  • Go для высокопроизводительного сетевого кода / краулинга

  • Redis на масштабе (локи, rate-limit, хранилище сессий)

  • Очереди и message brokers (Kafka / RabbitMQ / SQS)

Техническое лидерство

  • Полная ответственность за архитектуру и техническое развитие платформы

  • Code-review с архитектурной экспертизой

  • Менторинг senior-инженеров

  • Участие в найме и технических интервью

Хочу откликнуться
Повар-кассир в Бургер Кинг от 35 000 руб.

Готовить вкуснейшие вопперы и другие позиции из меню ресторана. Быстро и аккуратно собирать заказы. Вести расчет по кассе.

Сборщик интернет-заказов во ВкусВилл от 3 080 руб. в день

Сбор товаров, контроль продуктов, инвентаризация. Фирменная одежда, обучение, компенсации, карьерный рост.

Промоутер во ВкусВилл от 56 000 руб.

Раздача рекламных листовок, активное привлечение покупателей, работа с рупором. Обучение, фирменная спецодежда.

Мобильный продавец во ВкусВилл от 70 000 руб.

Развитие и раскрутка новых магазинов в Москве, Московской области и других регионах России

Сотрудник ресторана Rostics от 45 000 руб. + премии

Стабильность, обучение, премии, карьерный рост.

Кассир во ВкусВилл в среднем 43 300 руб.

Консультации покупателей, работа с кассой. Фирменная одежда, обучение, компенсации, карьерный рост.

Подработка рядом с домом в «Моя смена» от 10 000 до 22 000 руб.

Подработки в крупных торговых сетях рядом с домом по удобному графику.

<
>