Data Engineering

Data Engineer Full-time

О компании и команде

Flocktory - аккредитованная динамично развивающаяся IT-компания, один из лидеров рынка Marketing Technologies

Год основания: 2012

Команда: 190+ человек

Продукты: SaaS-платформа для маркетинга (MarTech)

Ценность наших продуктов: помогаем E-Commerce на основе предиктивной аналитики делать коммуникацию с покупателями максимально персонализированной и благодаря этому увеличивать лояльность покупателей, конверсию и средний чек

BigData: Благодаря интеграции нашей платформы с сайтами крупнейших игроков рынка мы можем видеть больше 35% всех транзакций Рунета и данные о покупках и поведении более 100 миллионов человек

Клиенты: 300+ крупных E-Commerce/ритейлеров, банков, страховых компаний (Детский мир, М.Видео, АльфаБанк, Газпромбанк, S7, Билайн, МТС, Мегафон, L'Oreal и др.)

Оборот: 2.5 + млрд.рублей за 2023 (наша выручка стабильно растет на 40% от года к году последние 9 лет)

Мы ищем опытного инженера по работе с данными. В этой роли у тебя будет возможность принять участие в разработке и имплементации архитектуры платформы данных, организации процессов дизайн ревью. А также ты будешь оказывать большое влияние на процессы разработки в платформе. Мы предоставляем возможность работать с современным стеком технологий и опыт работы с Big Data (100+ TB).

Что нужно будет делать:

  • Участвовать в разработке и поддержке архитектуры данных и пайплайнов как пакетной, так и потоковой обработки совместно с архитектором;
  • разрабатывать пакетные и потоковые пайплайны по требованиям от продуктовых команд;
  • мониторить пайплайны и качество данных, включая Data Lineage;
  • разбирать инциденты (есть дежурства в рабочее время, дежурный следит за слак каналом с инцидентами).

Ожидания от кандидата

Ты наш человек, если у тебя есть:

  • Опыт работы в роли инженера данных или инженера машинного обучения от 4 лет;
  • опыт построения дата платформы, включая хранилища данных, ETL / ELT пайплайнов и мониторинга;
  • опыт построения и работы с хранилищами данных;
  • опыт по выгрузке данных из внешних источников;
  • опыт работы с SQL и NoSQL;
  • опыт построения и организации Data Quality;
  • знание и ежедневное применение Scala Spark, желательно знание Python для работы с Airflow.

Наш стек:

  • Spark, Airflow
  • Scala, Python
  • Kafka
  • PostgreSQL, ClickHouse
  • git, CI-CD, Docker / Kubernetes
  • sbt / maven, ScalaTest / JUnit

Будет плюсом, если у тебя есть опыт с:

  • DBT, Kafka Connect
  • S3, Trino, Iceberg, Hudi, Hive
  • Amazon EMR, Yandex Dataproc

Условия работы

И самое главное:

  • Полностью “белая” заработная плата и все остальные выплаты;
  • возможность работать в гибридном формате или полностью удаленно, в т.ч. из другой страны (оформляем по ТК РФ и платим зарплату на рублевые счета);
  • возможность брать три дня дополнительно к отпуску каждые полгода для решения личных вопросов;
  • расширенная ДМС со стоматологией, онкозащитой, восстановлением после ковида, онлайн-поддержкой психолога, страховкой для путешественников;
  • скидки на обучение английскому от Skyeng;
  • годовой бюджет на внешнее обучение каждого сотрудника;
  • доступ к внутренней обучающей платформе с онлайн курсами по развитию hard и soft skills;
  • частичная компенсация покупки бизнес-литературы;
  • тренинги с внешними экспертами;
  • участие в конференциях, подготовка к выступлениям;
  • частичная компенсация занятий спортом;
  • онбординг с ментором;
  • поддержка buddy в течение первого месяца работы;
  • корпоративный ноутбук;
  • для тех, кто в Москве - современный комфортный офис в районе ст.м. Динамо (SOK, Рыбаков Тауэр);
  • скидки от партнеров (больше 300 интернет-магазинов);
  • большое количество онлайн/офлайн внерабочих активностей: корпоративы, Random coffee, FlockTalk, книжный клуб, покерный клуб, квизы.

Дополнительные инструкции

Этапы интервью

  • Встреча с рекрутером (онлайн, ~40 минут)
  • Техническое интервью (онлайн, ~1,5 часа)
  • Командное интервью (~1 час)
  • Проверка службы безопасности (3-5 рабочих дней)
  • Официальный оффер

Overview

  • Employer: Flocktory
  • Job Title: Data Engineer
  • Published: 1 week, 1 day ago
Apply For This Job