Data Engineering

Teamlead (команда Data Engineering - Platform) Full-time

О компании и команде

🚀 Отдел Data Engineering

Мы создаем хранилище данных и инструменты для их анализа. Наш отдел развивается вместе с бизнесом, этот юнит формируется с нуля, а значит, что у тебя будут все возможности проявить себя и на 100% участвовать в построении процессов по направлению данных.

👩‍💻Чем предстоит делать:

  • Заниматься разработкой, оптимизацией и мониторингом ETL-процессов на основе технологий GreenPlum, Airflow, ClickHouse, Spark и Python.
  • Поддерживать CDC-решение и улучшать его
  • Внедрять и поддерживать аналитиков в работе с NRT-решениями (RisingWave, kSQLdb, Flink)
  • Участвовать в тестировании и принятии новых решений для обработки данных в компании.
  • Помогать разработчикам в освоении новых технологий
  • Участвовать во внутренних и внешних мит-апах и рассказывать нашим клиентам и партнером о том, чем живет и дышит Sbermarket DWH

Ожидания от кандидата

⭐️Мы ожидаем от кандидата:

  • Опыт управления командой дата инженеров от 6 месяцев;
  • Понимание и умение работать с Iceberg, S3;
  • Понимание принципов организации хранилищ данных, принципов работы колоночных БД;
  • Уверенное знание SQL, умение строить сложные запросы и оптимизировать производительность;
  • Уверенное знание Python;
  • Опыт разработки Scala / Java;
  • Опыт работы с Apache Airflow;
  • Опыт работы со Spark.

Условия работы

🤗Что интересного есть у нас?

  • ДМС с первого месяца работы в компании;
  • дополнительные опции на выбор — спорт, английский, промокоды на заказ продуктов или билеты в отпуск;
  • удаленная работа. В Москве есть большой и красивый офис, поэтому если ты из этого города или будешь проездом — welcome;
  • техника для работы;
  • интеллектуальное и физическое развитие (электронная библиотека, книжный клуб, футбол, мастер-классы в офисе);
  • knowledge base с курсами, книгами и записями конференций + выделенный бюджет на внешнее индивидуальное обучение.

Overview

  • Job Title: Teamlead (команда Data Engineering - Platform)
  • Published: 11 months, 1 week ago
Apply For This Job