Data Engineer

Описание

чем ты будешь заниматься

• Участвовать в миграции Хранилища данных на новые технологии, используя наш фреймворк.
• Создавать новые и развивать старые интеграции по загрузке сырых данных в DataLake.
• Разрабатывать pipline'ов доставки и обработки данных формирования витрин данных.
• Писать и оптимизировать сложные скрипты обработки данных.

чем мы пользуемся

• S3, Impala, Airflow, Spark, DBT, Python.

мы ожидаем

• Опыт написания SQL-кода от 2 лет.
• Базовый уровень Python.
• Опыт создания ETL-процессов.
• Понимание основ баз данных.