Дата инженер

Описание

• общаться с заказчиками (аналитики, BI разработчики) для уточнения требований и проработки технических решений;

• поддержка и создание интеграций и витрин в рамках хранилища данных;

• построение ETL-процессов;

• уметь работать с разными типами источников (MS SQL Server, PostgreSQL, MongoDB, API, Kafka);

• разработка подключения новых источников в хранилище данных по стандартизированному процессу;

• создание проверки качества данных;

• документирование результатов разработки;

• осуществление поддержки имеющихся процессов.

Требования:

• знания концепций работы с git;

• знания принципов работы БД, построения ХД;

• опыт разработки ETL процессов (желательно Flink, NiFi, Spark. Опционально Pentaho, Informatica, SSIS);

• знание SQL (временные таблицы, оконные функции, cte и тд), опыт оптимизации запросов;

• знания языков программирования (желательно Python, Scala. Опционально другие);

• знакомство с Airflow.

Будет плюсом

• опыт работы с Greenplum;

• знание форматов хранения данных и табличных форматов (AVRO, Parquet, Iceberg).

Условия:

• работа в компании с развитой инженерной культурой;

• гибкая система премирования;

• расширенный социальный пакет: ДМС со стоматологией с первого месяца работы, психолог и страхование жизни, компенсация питания и оплата мобильной связи;

• возможности профессионального роста, программы развития для сотрудников;

• корпоративное обучение и доступ к базе знаний;

• внутренние профессиональные сообщества и мероприятия;

• автономность работы, возможность менять правила, ошибаться и создавать новое;

• гибридный формат работы (2 дня в офисе);

• современный офис в 2 минутах ходьбы от МЦК ЗИЛ.

С каждым годом на выбор сотрудника становится доступно больше дополнительных опций. Например, частичная компенсация путешествий, затрат на обучение, спортивных занятий.