Data Engineer
Описание
О нас: Мы в «АйДи Инжиниринг» создаём цифровые продукты для сложных инженерных задач. В нашей команде ценят профессионализм, инициативу и стремление делать качественный продукт. Сейчас мы ищем дата-инженера, который поможет нам развивать инфраструктуру данных. Обязанности: Аудит и развитие: Принять текущую инфраструктуру данных, провести ревизию существующих пайплайнов и архитектуры хранилища. Интеграция: Проектирование и разработка надежных ETL/ELT-процессов (Airflow, Python) для сбора данных из распределенных веб-сервисов и продуктовых баз. Хранилище: Проектирование архитектуры слоев в Greenplum (Data Warehouse). Оптимизация тяжелых SQL-запросов. Бизнес-ценность: Сборка витрин данных и визуализация бизнес-метрик в дашбордах (Apache Superset) в плотной связке с внутренними заказчиками. Надежность: Настройка алертинга и мониторинга пайплайнов, чтобы данные обновлялись бесперебойно. Наш стек: Python, SQL, Apache Airflow, Greenplum, Apache Superset, Docker (Linux). Требования: Уверенный Data Engineer (от 3 лет), который не боится работать full-stack: от извлечения данных по API до настройки дашборда. Отличное знание Python и SQL. Опыт работы с Greenplum (или ClickHouse/PostgreSQL на больших объемах) и Airflow. Продуктовое мышление: вы понимаете, что ценность данных — в ответах на вопросы бизнеса, а не в самом факте их хранения. Умение работать автономно и брать на себя ответственность за технические решения. Условия: Место работы: в офисе г. Санкт - Петербург Участие в проекте с высокой степенью ответственности и возможностью влиять на архитектуру Современный технологический стек и поддержку профессионального роста ДМС, страхование жизни и выезда за рубеж, корпоративные скидки, кафетерий льгот (на выбор) Годовая премия по результатам работы Благодаря инновационному подходу к работе и использованию самых продвинутых технологий, компания получила статус аккредитованной ИТ-компании Здоровая рабочая атмосфера, комфортные условия труда (чай, кофе, фрукты, пинг-понг, кикер, занятия йогой в офисе, участие в спортивных мероприятиях) Пятидневная рабочая неделя, гибкое начало рабочего дня с 8.00 до 10.00 Работа в офисе в Санкт-Петербурге