Инженер данных (Data Engineer)
Описание
Компания, специализирующаяся на разработке и поддержке систем хранения и анализа данных, ищет талантливого инженера данных, который сможет присоединиться к нашей команде и помочь нам в реализации проектов, связанных с созданием и оптимизацией наших систем хранения данных.В качестве Data Engineer вы будете отвечать за разработку и поддержку систем хранения данных, оптимизацию производительности, анализ и оптимизацию запросов к нашим базам данных, а также участвовать в разработке и внедрении новых технологий для хранения и обработки больших объемов данных.Работа предполагает тесное сотрудничество с разработчиками баз данных и командой аналитиков, чтобы обеспечить максимальную эффективность наших систем.Основные обязанности: – Составление, анализ и оптимизация запросов к базам данных;– Разработка и оптимизация ETL-алгоритмов на Python;– Оптимизация производительности систем хранения и передачи данных;– Представление подготовленных данных на дашбордах на платформе Visiology;– Участие в разработке и внедрении новых технологий хранения и обработки данных;– Работа в команде с другими специалистами по данным и разработчиками баз данных. Что для нас важно: – Опыт работы инженером данных от 2 лет;– Уверенное владение Python и опыт работы с библиотеками Pandas, NumPy, желательно Scikit-learn, оптимизация алгоритмов для работы на больших объемах данных;– Глубокое знание SQL (Postgres, Clickhouse), Big Data технологий (Apache Airflow, Apache Hadoop, Apache Spark) или других подобных систем, желательно владение NoSQL (MongoDB), Elasticsearch;– Навыки работы с системами контроля версий (git, gitlab);– Опыт разработки и оптимизации систем хранения данных;– Навыки работы с инструментами мониторинга и анализа данных (Prometheus, Grafana);– Коммуникабельность и умение работать в команде;– Желание развиваться в области хранения, обработки и анализа данных. Мы предлагаем: – Официальное трудоустройство;– Конкурентоспособную заработную плату;– Возможность работать в гибридном формате;– Организация состоит в реестре аккредитованных ИТ-компаний;– Возможности для профессионального роста и развития;– Корпоративные мероприятия и социальные программы. Если вы готовы внести свой вклад в развитие нашей компании и обладаете всеми необходимыми навыками и опытом, то мы ждем ваше резюме и готовы рассмотреть вашу кандидатуру на данную позицию.