Data Engineer
Описание
По вакансии офисный формат работы в МосквеBell Integrator – аккредитованная ИТ-компания и являемся частью большой семьи ГК Softline. Bell Integrator активно реализует проекты по всей России, среди наших заказчиков – крупнейшие системообразующие финансовые, телеком и ритейл компании страны.Требования:SQL на продвинутом уровне (аналитические функции, подзапросы, хранимые процедуры, оптимизация производительности).Cтек технологий Big Data (Hadoop, Spark, Hive/Impala) и любой СУБД.Знание понятий и концепций DWHPython (PySpark, Pandas, NumPy, REST API);Airflow/Dagster/OozieBitBucket\GitBashОбязанности:Загрузка, очистка и трансформация больших объемов данных из различных источников (RDBMS, Hadoop, плоские файлы) в рабочую область (платформы Hadoop)Проектирование и разработка аналитических витрин данныхПроектирование и разработка коннекторов для ETL процессовМониторинг и оптимизация процессов загрузки, преобразования данных и сборки витринРазработка, поддержка и оптимизация инфраструктуры и внутренних сервисов для обработки больших объемов данных;Разработка инструментов для автоматизации рутинных задач, связанных с обработкой данных Условия:Возможность профессионального и карьерного роста в компанииВозможность поучаствовать в разных проектахОформление в соответствии с ТК РФ