Дата-инженер
Описание
Комус – ведущий производитель и комплексный поставщик товаров и услуг для бизнеса. IT-ландшафт включает в себя собственные ЦОДы, мощности в облаках и 100 бизнес-приложений, 40 из которых – крупные. Сегодня ИТ-подразделение Комус – это аккредитованная ИТ-компания, численностью свыше 900 сотрудников. Мы реализуем амбициозную программу цифровой трансформации, и в нашей команде открыта вакансия дата-инженер ПРЕДЛАГАЕМ Конкурентный доход (обсуждаем индивидуально) Официальное оформление по ТК РФ в аккредитованную ИТ-компанию Гибридный или полностью удаленный формат работы (гибкость и индивидуальный подход), график 5/2 с 9.00 до 18.00 Удобную локацию – новый современный офис БЦ «Интеграл» в пешей доступности от ст. м. Авиамоторная Развитую офисную инфраструктуру: зоны с бесплатными напитками и снеками, корпоративный бесплатный фитнес-центр и игровые пространства ДМС Корпоративную программу лояльности и скидок (товары и услуги, развлечения, рестораны, спорт, отдых и многое другое) Абонементы в фитнес-клубы по специальным условиям Дополнительное премирование в рамках реферальной программы «Все в Комус» Корпоративное обучение и поддержка опытного наставника Возможности для развития и карьерного роста Драйвовые мероприятия и подарки к праздникам для сотрудников и их семей ЧЕМ ПРЕДСТОИТ ЗАНИМАТЬСЯ Дорабатывать OpenSource-решения DataHub и GreatExpectations интеграции с компонентами микросервисной платформы Дорабатывать инструменты управления инфраструктурой платформы в части компонентов слоя данных Реализовывать компоненты продуктов данных и процедуры контроля качества данных Проектировать компоненты и конвейеры обработки данных для поддержки продуктовой аналитики Писать unit и интеграционные тесты Участвовать в разработке концепций, архитектурных решений и подходов связанных с внедрением парадигмы data governance Участвовать в развитии CI/CD процессов Проводить код-ревью ДЛЯ НАС ВАЖНЫ Знание современных архитектур данных (MDW, Data Lake, Data Mesh, Data flow) Понимание принципов потоковой и пакетной обработки данных Опыт в разработке и тестировании ETL/ELT-процессов на базе одного из фреймворков (Airflow, Dagster, Spark, Flink, Nifi) Понимание принципов и практик data governance и контроля качества данных Опыт реализации решений по тестированию и контролю качества данных Опыт разработки на Python или Java от 5 лет Умение писать SQL-выражения Опыт работы с одной из реляционных СУБД (PostgreSQL, MySQL, MSSQL) Понимание принципов и паттернов юнит-тестирования. Опыт работы с фреймворками юнит-тестирования на Python/Java Понимание принципов рефакторинга и опыт работы в парадигме TDD (Test-Driven Development) Опыт использования NoSQL решений (Elastic, MongoDB, Cassandra, ClickHouse и пр.) Опыт работы с одним или несколькими IaaC решениями (Terraform, Ansible, Helm) Знание и опыт использования Docker, docker-compose Опыт работы с git БУДЕТ ПЛЮСОМ Опыт разработки Enterprise-решений с использованием Spring framework / Spring Boot / Quarkus или другими Знание современных паттернов проектирования (GoF, Fowler, EIP) Знание современных архитектурных стилей и архитектурных принципов (modulith, микросервисы, RESTful, EDA, 12factors, reactive) Понимание CI/CD процессов и DevOps практик Опыт работы с k8s / OpenShift / Nomad / Docker Swarm или другими схожими технологиями Знание современных методологий разработки ПО