Middle / Strong Middle Web Scraping & Reverse Engineering Engineer
Описание
InsiderLabs- платформа, разрабатывающая современные цифровые продукты и сервисы для аналитики, автоматизации и обработки данных. Мы ищем Web Scraping & Reverse Engineer, который будет разрабатывать и поддерживать высоконагруженные системы сбора данных, исследовать механизмы защиты сайтов и API и обеспечивать стабильность источников в production. Основные задачи: Исследовать и подключать новые источники (web/API) Писать production‑скраперы на Python (asyncio, Playwright, aiohttp) Разбираться с network‑трафиком, JavaScript, антибот‑защитой Работать с прокси, сессиями, fingerprinting, GraphQL, WebSocket Мониторить, отлаживать, оптимизировать производительность Требования: Хорошее знание Python и опыт написания production-кода. Практический опыт коммерческого web scraping / crawling. Опыт работы с динамическими и JavaScript-heavy сайтами. Понимание того, как браузер взаимодействует с сервером на network level. Практический опыт исследования сайтов и API через DevTools/network traffic. Опыт работы с современными механизмами anti-automation / anti-bot protection. Умение работать с proxies, sessions, cookies, rate limits и distributed requests. Хорошее понимание async/concurrent workloads. Опыт самостоятельного debugging нестабильных production scrapers. Умение не только написать crawler, но и обеспечить его дальнейшую стабильную эксплуатацию Будет плюсом: Reverse engineering мобильных приложений (IDA, Frida, JADX) Burp / mitmproxy, CDP, TLS‑fingerprinting Protocol Buffers, Kubernetes, high‑load системы Мы предлагаем: Современный стек и высоконагруженные проекты Сильную команду профессионалов Удаленный формат работы Гибкий график Конкурентный уровень заработной платы