Data Engineering

Lead Data Engineer Full-time

О компании и команде

На данный момент мы реализуем масштабный проект. Мы собираем данные в едином корпоративном хранилище и используем их для принятия решений, планирования, оценок и анализа. В связи с этим, мы в поиске инициативного и самостоятельного Lead Data Engineer

Задачи, которые предстоит решать:

  • Разработка стратегий загрузки, преобразования и сохранения данных в хранилище
  • Построение хранилища и витрин данных. Проектирование, разработка и поддержка архитектуры для работы с большими данными: ODS, DDS, DM, DM BI, BI
  • Менторство и руководство. Направлять и развивать команду дата инженеров. Помощь в найме новых инженеров и их обучение
  • Настройка сбора данных из разрозненных источников в единое хранилище
  • Обработка сырых данных для дальнейшего анализа


Ожидания от кандидата

  • Опыт работы руководителем команды дата инженеров или кросс функциональных команд от 1 года
  • Опыт работы дата инженером от 2 лет
  • Опыт создания ETL/ELT-процессов с использованием Apache Airflow + Spark или аналогичных. Да-да, Spark пока у нас нет, только Airflow
  • Знания Python, PL/pgSQL и SQL. Сложные запросы, аналитически функции, понимание физической реализации join’ов, оптимизация производительности запросов
  • Опыт работы с Greenplum (Arenadata DB), PostgreSQL, Clickhouse. И Clickhouse у нас пока нет, но будет
  • Опыт с Git

Будет плюсом:

  • Знание инструментов для захвата/преобразования/автоматизации данных/моделей: dbt, liquibase, logstash, и т. п.
  • Опыт работы с любым BI инструментом. Пока мы используем PowerBI, но всё может измениться
  • Техническое образование

Условия работы

  • работу в команде экспертов
  • официальное трудоустройство в аккредитованной ИТ-компании
  • расширенный соц. пакет – ДМС, путевки в санатории и дома отдыха, детские оздоровительные лагеря, скидки от компаний-партнеров, скидки на ГСМ
  • достойный уровень оплаты труда (оклад + премии)
  • профессиональное развитие за счет компании, корпоративная библиотека и база знаний
  • релокационный пакет
  • гибрид/удаленная работа после испытательного срока по согласованию с руководителем, на территории РФ. Возможны командировки

Сегодня нас уже почти 600, наши проекты растут, и мы хотим увидеть в нашем коллективе новых коллег! Возможно, это вы!

Overview

Apply For This Job