Data Engineer
Описание
Привет! Мы компания Techno Diasoft - аккредитованная IT компания, созданная в 2008 году. Специализируемся на разработке высоконагруженных FinTech проектах, создании умных устройств, голосовых ассистентов, а также разработке инновационных решений в области биометрии и искусственного интеллекта. Флагманским продуктом компании является автоматизированная банковская система xBank. Мы постоянно растем: присоединяются новые таланты, появляются инновационные проекты, и нас выбирают ведущие банки, финансовые компании и инновационные предприятия. В настоящее время в компании работает более 300 сотрудников. О проекте и задачах: Сейчас мы в поиске Data Engineer, который присоединится к одному из наших актуальных проектов.Основной стек: Hadoop + spark.Вспомогательный стек: Bitbucket, Nexus, sberTrack(аналог Atlassian Confluence). Требования: Уверенные знания SQL, типы Join’ов, оконные функции. Понимание архитектуры Hadoop Умение работать с git: создавать бранчи, делать pull request’ы Умение работать с ssh: создавать ключи, подключаться к хосту по ssh, уверенное владение командной строкой linux Будет плюсом: Опыт Scala/PySpark Понимание архитектуры Spark Опыт работы в Jupyter Знание Oozie Умение профилировать источники данных Понимание федерации кластеров. Опыт построения витрин содержащих ТБ данных Мы заботимся о наших сотрудниках и предлагаем: Оформление по трудовому договору Офисный формат работы Простой и быстрый процесс собеседований Медицинское страхование с первого дня работы, включая стоматологию Предоставление необходимой техники для работы Дополнительные выплаты и поддержка от нас в важные моменты вашей жизни Корпоративные скидки у наших партнеров (включая фитнес, изучение иностранных языков, курсы от ЯндексПрактикум и многое другое) Корпоративная библиотека с доступом к книгам от Литрес