Data Engineer
Описание
В 2022 году Московской бирже исполнилось 30 лет. Мы появились вместе с современной Россией и за эти годы с нуля создали рынок инвестиций. Сегодня миллионы людей и тысячи компаний доверяют нам и пользуются нашей инфраструктурой. Ежедневно на наших торговых платформах совершаются миллионы транзакций в минуту – без задержек, без перебоев. Мы храним в депозитарии цифровые записи о каждом активе, который торгуется на бирже. Мы следим за тем, чтобы все операции соответствовали правилам торгов и требованиям регуляторов. А еще мы активно развиваемся и давно вышли за рамки классического биржевого бизнеса. Мы разрабатываем и поддерживаем платформы, которые соединяют финансовые компании и клиентов, Мы идем на внебиржевой рынок и создаем на нем удобные сервисы, Мы открываем новые возможности для инвесторов, корпораций, банков. Мы развиваем финансовую культуру страны. В #moexteam уже больше 2200 человек: ИТ-специалисты и эксперты по развитию рынков, продуктовые и проектные менеджеры, финансисты и юристы, маклеры и многие другие. Мы разные, но всех нас объединяет общая цель – помочь людям и компаниям управлять деньгами, используя передовые технологии и знания. В Департамент по работе с данными требуется Data Engineer Чем предстоит заниматься: Проектирование и разработка витрин данных и аналитических таблиц для аналитического подразделения Биржи; Оптимизация и рефакторинг: поиск «узких горлышек» в SQL-запросах и ETL-процессах, их исправление. Опыт работы с хранилищами Oracle, GreenPlum; Масштабирование процессов: внедрение стандартов код-ревью, тестирования данных (data quality) и документации, чтобы вся команда работала эффективно; Участие в архитектурных обсуждениях: предложение решений на основе экспертизы. Мы ожидаем от Вас: Hard Skills: SQL: уверенное владение CTE, оконными функциями. Умение читать Explain Plan и оптимизировать тяжелые запросы; Python: опыт написания скриптов для обработки данных, автоматизации; Orchestration: опыт работы с Airflow (создание DAG, настройка зависимостей, мониторинг); Git: понимание веток, merge/pull requests, решение конфликтов слияния. Soft Skills: Проактивность: умение говорить «нет» плохому ФЗ и предлагать альтернативу; Командная игра: готовность делиться знаниями, проводить код-ревью, учить джуниоров. Будет плюсом: Опыт бэкенд-разработки или построения data-инфраструктуры с нуля; Опыт работы с хранилищами S3, ClickHouse.