Старший разработчик сервисов данных (Python)
Описание
Мы ищем сильного разработчика на Python для создания бэкенда Экосистемы Моделирования Космической Системы, которая интегрирует различные вычислительные сервисы. Экосистема включает в себя модули визуализации и обработки данных, а также алгоритмы вычислений параметров Космической Системы. Разработка ведется собственными силами. Чем предстоит заниматься: Разработкой микросервисов управления данными Модели Космической Системы; Разработкой пайплайнов обработки данных ETL/ELT; Интеграцией вычислительных модулей (микросервисов); Реализацией процессов контроля качества данных; Разработкой моделей данных и согласование дата-контрактов; Работой с СУБД Postgres, Clickhouse; Обработкой и анализом данных в Pandas, NumPy, Polars. Стек разработки: Python 3.12+, FastApi (Pydantic v2), Numba, Numpy, Pandas, SQLAlchemy 2+, Ruff+MyPy (lint), Kafka (FastStream), Redis (Dragonfly), Matlab, Postgres, Clickhouse. Что мы ожидаем: Инженерное или техническое образование (обязательно); Опыт разработки на Python от 3х лет, на позиции Middle - от 1 года; Опыт работы с библиотеками для анализа данных: Pandas, NumPy, Polars; Понимание принципов проектирования и работы с хранилищами данных; Опыт работы с базами данных PostgreSQL, ClickHouse; Опыт работы с инструментами ETL/ELT (например, Airflow, Dagster, PandasETL); Понимание принципов работы систем потоковой обработки данных; Опыт в разработке веб-приложений (FastAPI); Опыт работы с контейнерами Docker; Опыт работы с инструментами командной разработки: Confluence, Jira, Git.