Data Engineering

Data Engineer Full-time

О компании и команде

СберМаркет — технологичный онлайн-сервис, который помогает делать покупки не выходя из дома. Наша миссия: экономить время, энергию и деньги людей для чего-то более важного.

В команде Data Engineering уже более 20 профессионалов 🌟

Мы создаем хранилища данных и инструменты для их анализа. В связи с ростом и выросшими нагрузками, мы ищем инженера в группу разработки и развития транспортировки данных.

💥 Чем будем заниматься

  • разработкой, оптимизацией и мониторингом ETL-процессов на основе технологий GreenPlum, Airflow, ClickHouse, Spark и Python;
  • поддерживать CDC-решение и улучшать его;
  • внедрять и поддерживать аналитиков в работе с NRT-решениями (RisingWave, kSQLdb, Flink);
  • участвовать в тестировании и принятии новых решений для обработки данных в компании.

Ожидания от кандидата

  • понимание принципов организации хранилищ данных, принципов работы колоночных БД;
  • уверенное знание SQL, умение строить сложные запросы и оптимизировать производительность;
  • уверенное знание Python;
  • опыт разработки Scala / Java (желательно);
  • опыт работы с Apache Airflow и Iceberg;
  • понимание CI/CD, K8S, Terraform.

Условия работы

  • ДМС с первого месяца работы в компании;
  • дополнительные опции на выбор — спорт, английский, промокоды на заказ продуктов или билеты в отпуск;
  • удаленная работа. В Москве есть большой и красивый офис, поэтому если ты из этого города или будешь проездом — welcome;
  • техника для работы;
  • интеллектуальное и физическое развитие (электронная библиотека, книжный клуб, футбол, мастер-классы в офисе);
  • knowledge base с курсами, книгами и записями конференций + выделенный бюджет на внешнее индивидуальное обучение.

А ещё

  • мы сами участвуем в конференциях, как спикеры;
  • проводим внутренние митапы и дискуссионные клубы;
  • не боимся экспериментировать с новыми решениями и технологиями;
  • заботимся о сотрудниках: в компании есть команда счастья и корпоративные психологи для разговоров по душам.

Overview

Apply For This Job