Data Engineer

Описание

Мы занимаемся разработкой сложных систем и приложений в айгейминг сфере. Это качественные и современные продукты под все платформы.

В нашу команду анализа данных мы ищем инженера данных, который будет развивать инфраструктуру данных: проектировать и поддерживать хранилище данных, внедрять инструменты для эффективной работы аналитиков.

Задачи:

• Разработка и поддержка аналитического хранилища и витрин данных;

• Внедрение и сопровождение инструментов для трансформации и оркестрации данных (dbt, Airflow);

• Построение и оптимизация ETL/ELT-процессов, включая стриминг (Kafka, NiFi и др.);

• Оптимизация производительности запросов и процессов обработки данных;

• Интеграция данных из различных источников (API, Google Sheets, Airtable и др.).

Требования:

• Опыт работы на позиции Data Engineer (3+ лет) со схожим стеком;

• Опыт внедрения и работы с dbt в продакшене;

• Владение Airflow для построения и поддержки пайплайнов;

• Опыт работы со стримингом данных (Kafka, NiFi или аналоги);

• Python для построения дата-пайплайнов и интеграции источников, Git для командной работы.

• SQL для разработки и оптимизации хранилищ и запросов на больших объёмах данных;

• Опыт построения DWH / Data Lake;

Будет плюсом:

• Настройка мониторинга и алертинга дата-процессов;

• Понимание концепций тестирования кода и контроля качества данных.

Условия:

• Полная удаленка, гибкое начало рабочего дня;

• Работа в команде профессионалов, готовых поддержать твои инициативы;

• Предоставляем технику по запросу;

• Развитие полезных навыков: оплачиваем участие в конференциях и профильные курсы (70% стоимости), покупаем нужную литературу.