Data Engineer MLOpsEngineer

Описание

ПРОЕКТ: в банковской сфере.

ЧТО МЫ ОЖИДАЕМ ОТ КАНДИДАТА:

• Опыт работы по специальности от 2-х лет;
• Опыт разработки Python/Spark;
• Понимание основ облачных технологий и технологий виртуализации и контейнеризации;
• Опыт с экосистемой Hadoop (HDFS, Hive, Spark и пр.);
• Опыт работы с ETL (Airflow, и пр.);
• Опыт работы с CI/CD решениями на базе Jenkins и Bitbucket / Git.

БУДЕТ ПЛЮСОМ:

• Опыт работы с BigData в сфере DE/DS/DA;

• Опыт работы с системами управления базами данных (Hadoop);

• Опыт работы с платформами оркестрации контейнеров K8s, OpenShift;

• Опыт внедрения DS-моделей в промышленный контур;

• Опыт работы с Kafka;

• Опыт работы с популярными РСУБД (Greenplum, Teradata, Oracle, PostgreSQL);

• Понимание принципов построения хранилищ данных DWH.

ЧЕМ ПРЕДСТОИТ ЗАНИМАТЬСЯ:

• Разработка витрин и анализ больших объемов данных с использованием Python и Spark;
• Написание скриптов Python (SQL-запросы) для сложной обработки и преобразования больших данных;
• Работа с ETL и хранилищами данных;
• Развертывание разработанных решений в производственной среде (ПРОМ) (Jenkins);
• Взаимодействие с аналитиками проекта для определения требований и целей разработки
  Ведение технической документации по релизному процессу;
• Фиксация договоренностей с заказчиком и поддержание актуальной документации по проектам;
• Поддержка качества данных и обеспечение точности отчетов и наполнения витрин;
• Внедрение разработанных DS-моделей в промышленную среду (MLOps).

МЫ ПРЕДЛАГАЕМ:

• Возможность участия в интересных проектах.
• Возможность профессионального и карьерного роста в компании.
• Опыт работы в команде профессионалов.
• Специальные тарифы для сотрудников в спортивные клубы и языковые курсы и пр.
• Офисный формат работы в Санкт-Петербурге.