🚀 Отдел Data Engineering

Мы создаем хранилище данных и инструменты для их анализа. Наш отдел развивается вместе с бизнесом, этот юнит формируется с нуля, а значит, что у тебя будут все возможности проявить себя и на 100% участвовать в построении процессов по направлению данных.

👩‍💻Чем предстоит делать:

• Заниматься разработкой, оптимизацией и мониторингом ETL-процессов на основе технологий GreenPlum, Airflow, ClickHouse, Spark и Python.
• Поддерживать CDC-решение и улучшать его
• Внедрять и поддерживать аналитиков в работе с NRT-решениями (RisingWave, kSQLdb, Flink)
• Участвовать в тестировании и принятии новых решений для обработки данных в компании.
• Помогать разработчикам в освоении новых технологий
• Участвовать во внутренних и внешних мит-апах и рассказывать нашим клиентам и партнером о том, чем живет и дышит Sbermarket DWH

⭐️Мы ожидаем от кандидата:

• Опыт управления командой дата инженеров от 6 месяцев;
• Понимание и умение работать с Iceberg, S3;
• Понимание принципов организации хранилищ данных, принципов работы колоночных БД;
• Уверенное знание SQL, умение строить сложные запросы и оптимизировать производительность;
• Уверенное знание Python;
• Опыт разработки Scala / Java;
• Опыт работы с Apache Airflow;
• Опыт работы со Spark.

🤗Что интересного есть у нас?

• ДМС с первого месяца работы в компании;
• дополнительные опции на выбор — спорт, английский, промокоды на заказ продуктов или билеты в отпуск;
• удаленная работа. В Москве есть большой и красивый офис, поэтому если ты из этого города или будешь проездом — welcome;
• техника для работы;
• интеллектуальное и физическое развитие (электронная библиотека, книжный клуб, футбол, мастер-классы в офисе);
• knowledge base с курсами, книгами и записями конференций + выделенный бюджет на внешнее индивидуальное обучение.