Senior Data Engineer
Описание
Чем предстоит заниматься:Развитие архитектуры data-платформы: хранилища, пайплайны, DWH, lakehouse.Разработка и оптимизация ETL/ELT процессов (например, с использованием Airflow, dbt, Spark).Подключение новых источников данных (внутренние и внешние), включая API, S3, Kafka и др.Поддержка качества и надёжности данных: автоматизация мониторинга, алертов и тестов.Взаимодействие с аналитиками, дата-сайентистами, разработчиками BI.Участие в выборе технологий и стандартизации подходов к работе с данными.Настройка CI/CD для data-инфраструктуры, включая тестирование и деплой. Мы ожидаем: 4+ лет опыта работы с данными, в роли Data Engineer или аналогичной. Знание SQL, умение писать эффективные запросы и строить модели данных. Опыт с дата-оркестраторами (Airflow и др.). Опыт с аналитическими СУБД: Greenplum, ClickHouse, BigQuery, Redshift или аналогичными. Владение Python (или другим языком для data pipelines). Знание принципов построения надёжных, масштабируемых ETL/ELT процессов. Опыт работы с S3. Знание принципов CI/CD и DevOps-подходов для data-инженерии. Будет плюсом Опыт миграции данных между системами, построения CDC-решений. Опыт с Data Vault, Data Mesh или другими современными архитектурами. Навыки работы с потоковыми данными (Kafka, Flink, Spark Streaming). Опыт сопровождения чувствительных или персональных данных, знание best practices по безопасности. Мы предлагаем: Амбициозные задачи и возможность влиять на ключевые бизнес-процессы; Сильная техническая команда, которая всегда готова делиться опытом; Крутая продуктовая культура. Опираемся на исследования и метрики, фокусируемся на результате; Свобода действий и возможность напрямую влиять на развитие бизнеса; Гибкий график. Гибридный или удаленный формат работы на выбор главное — результат; Официальное оформление по ТК УЗ; Три дополнительных оплачиваемых дня к отпуску; Мы резидент IT-парка, наши специалисты могут получить IT-визу, которая приравнивается к ВНЖ; Развитие личного бренда на конференциях, митапах и внутренних событиях.