Data Engineer, Ozon fresh

Описание

Ozon fresh — одно из самых перспективных и быстроразвивающихся направлений компании, которое является сервисом быстрой доставки свежих продуктов питания, товаров повседневного спроса, бытовой техники, электроники и других категорий. Мы ищем Data engineer в группу товародвижения в отдел Data Science.Мы поддерживаем и развиваем проект автоматического заказа поставщикам для оптимального пополнения наших складов товарами.Это позволяет поддерживать большинство наших товаров доступными к покупке при минимизации издержек на хранение и списания. Наш стек Python, Pyspark, PostgreSQL, Clickhouse, Kafka, Memcashed, Redis, Hadoop, Airflow Вы будете Писать алгоритмы обработки больших данных (несколько сотен миллионов строк в таблице). Исследовать и подготавливать данные. Оптимизировать текущие вычисления. Заниматься продуктивизацией алгоритмов и их сопровождением. Делать ревью кода и анализ инцидентов. Нам важно Наличие опыта в роли Data engineer от 2 лет. Высшее математическое или техническое образование. Уверенное владение Python, PySpark, SQL. Знание устройства Hadoop, HDFS, Hive. Опыт работы с системами контроля версий (Git). Будет плюсом Опыт работы с Go . Опыт работы с Airflow. Опыт работы с DBT.