Data Engineer
Описание
Мы - Ви.Тех, аккредитованная ИТ компания. Наша команда - 500+ счастливых сотрудников, это микс талантов, где каждый член важен, как ключевой элемент в коде. Мы создаем решения для крупнейшей e-commеrce компании в России - ВсеИнструменты.ру. "ВсеИнструменты.ру" – крупнейший интернет-магазин по продаже товаров для дома, дачи, строительства и ремонта. О нас в цифрах: 20 лет развития, роста и результата; ТОП 6 сайтов категории Home and Garden в мире по Similarweb; ТОП 30 лучших IT-работодателей России на Хабр Карьере; 950+ магазинов - мы самая большая DIY-сеть в России; 1,5 млн. товаров на сайте; 1,78 млн. уникальных посетителей сайта ежедневно; 8 место среди интернет-магазинов России по Data Insight Сейчас мы ищем Data Engineer Мы ищем инженера, который будет развивать корпоративную платформу данных и DWH компании: модернизировать ETL-ландшафт, переводить процессы с SSIS на Apache Airflow 3 и внутренний Python-фреймворк, а также делать работу с данными надежнее и удобнее для аналитических команд. Какие задачи тебя ждут: Развивать корпоративную платформу данных и DWH; Переводить существующие ETL-процессы с SSIS на Apache Airflow 3 и внутренний YAML-driven Python-фреймворк; Разрабатывать и поддерживать надежные data-пайплайны; Обеспечивать стабильную промышленную эксплуатацию: retry, backfill, идемпотентность, дедупликацию и корректную обработку сбоев; Развивать проверки качества данных; Оптимизировать SQL и работу с Microsoft SQL Server; Развивать CI/CD-процессы для работы с данными; Создавать переиспользуемые инструменты и self-service решения для аналитических команд; Участвовать в развитии архитектуры DWH и подходов к моделированию данных. Твоя суперсила: Опыт работы Data Engineer от 3 лет; Уверенный SQL и практический опыт работы с Microsoft SQL Server; Python: ООП, модульная архитектура, type hints, тестирование, логирование, работа с REST API и БД; Опыт работы с Apache Airflow или другим промышленным оркестратором; Опыт работы с dbt или аналогичным SQL transformation framework; Понимание ETL/ELT, batch- и near-real-time-обработки; Умение строить надежные и отказоустойчивые data-пайплайны; Опыт Git и CI/CD; Опыт реализации Data Quality-проверок; Понимание архитектуры DWH и организации слоев данных; Знание подходов к моделированию данных: Kimball, Inmon, Data Vault, Anchor Modeling. С нас: Возможность влиять на продукт, мы всегда открыты к новым идеям и обратной связи; Возможность быть эффективным в любой точке мира, мы работаем удаленно, но это не мешает нам быть командой (при желании, можно работать из офиса - Москва, Нижний Новгород, Ковров, Владимир); Дружелюбная атмосфера и открытость к новым знаниям, мы общаемся на "ты", устраиваем внутренние митапы, выступаем на конференциях, делимся опытом; Возможность стать амбассадором ИТ бренда, у нас есть деврел :) Счастливая и вовлеченная команда – держим высокий показатель удовлетворенности сотрудников (eNPS); Перфоманс ревью 2 раза в год с премией до двух окладов и описанные грейды; Забота о здоровье - для тебя есть расширенный ДМС со стоматологией, а семью можно подключить со скидкой; Комфортное рабочее место - выдаем технику или можешь работать на своей.