Data Engineer

27 сентября 2021    32
Откликнуться

Мы разрабатываем аналитические системы на базе единой платформы, которые позволяют безопасно работать с данными независимо от их формата, метода хранения и эксплуатации. Платформа основана на концепции Infrastructure as Code (IAC) и состоит из нескольких независимых программных продуктов и сервисов на базе JVM/Scala и Kubernetes. Она обеспечивает высокий уровень потоковой обработки и хранения данных, управления доступом и метаданными, а также контролем их использования в периметре частных облачных сред.

Для участия в разработке аналитической платформы требуется Data Engineer.

Задачи:

  • Реализация компонентов платформы, связанных с обработкой больших данных.
  • Реализация распределенных алгоритмов на больших данных и внедрение моделей машинного обучения.
  • Формирование и обработка больших наборов данных.
  • Участие в разработке архитектуры платформы.

Наши ожидания:

  • Профильное образование: информационные технологии, статистика, математика.
  • Опыт работы по специальности от 3-х лет (для Senior Data Engineer от 5 лет).
  • Опыт разработки на Scala или Java от 1-го года (для Senior Data Engineer от 3-х лет).
  • Знание особенностей реализации различных алгоритмов и структур данных.
  • Опыт работы в команде.

Будет плюсом:

  • Опыт работы с Apache Spark, Flink, Kafka.
  • Опыт работы с распределенными БД: Cassandra, HBase, ElasticSearch и т.д.
  • Глубокое понимание особенностей архитектуры JVM.
  • Интерес к технологиям Data Science, участие в конкурсах по машинному обучению.

Технологический стек:

  • Языки программирования: Scala, Python.
  • Обработка и хранение данных: Spark, Flink, Kafka, ClickHouse, Cassandra, ElasticSearch.
  • Прочие технологии и фреймворки: Finagle, Jackson, ScalaTest, Docker.

Бонусы

  • Работу в развивающейся технологической компании.
  • Интересные задачи (исследовательские и прикладные), работа в команде исследователей и разработчиков.
  • Профессиональный и карьерный рост.
  • Комфортные рабочие места в современном офисе, оснащение новым it-оборудованием, зона отдыха.
  • Оформление в соответствии с ТК РФ.
  • Заработную плату на уровне лидеров индустрии (обсуждается индивидуально и зависит от опыта и компетенций кандидата).
  • График работы: пн-пт (с 10 до 19); возможно согласование индивидуального графика с руководителем и совмещение с научной и/или преподавательской деятельностью.
  • Соцпакет: отпуск 28 календарных дней, ДМС после испытательного срока (3 месяца), корпоративное обучение (английский язык).
  • Возможность участия в профессиональных конференциях.
  • Релокационный пакет для специалистов из других регионов.

Подписывайтесь на наш телеграм-канал @remotelist, чтобы всегда быть в курсе новых вакансий! Дайджесты с новыми вакансиями появляются каждые 2-3 часа.

Еженедельная рассылка топ-15 самых просматриваемых вакансий сайта. Письмо приходит каждое воскресенье.