Data Engineering

Data engineer Full-time

Условия работы

Чем предстоит заниматься:

  • Формирование модели данных хранилища и ETL по обновлению этой модели;
  • Разработка витрин и новых интеграций, а также улучшение и поддержка существующих;
  • Контроль и развитие ETL процессов;
  • Мониторинг загрузки и производительности хранилища данных;
  • Оптимизация хранилища и запросов;
  • Поддержка аналитиков и других пользователей;

Стек технологий: Python, SQL, Airflow, Clickhouse, Greenplum

Наши ожидания от кандидата :

  • Опыт работы архитектором баз данных, разработчиком хранилища или администратором баз данных;
  • Опыт работы с Postgres-подобными базами (redshift, greenplum);
  • Желателен опыт работы с облачными хранилищами типа AWS, Azure, Я.Облако - понимание как скейлить, как мониторить, как настраивать;
  • Знать и уметь использовать разные парадигмы хранения и организации данных;
  • Работать с нагруженными хранилищами 10Tb+ (терабайт);
  • Желание развиваться в области проектирования и развития хранилища данных;
  • SQL - must have, Python - базовые навыки, Airflow - как бонус.

Мы предлагаем:

  • Конкурентоспособная заработная плата (обсуждается индивидуально);
  • Возможность работать удаленно;
  • Дружеская атмосфера и поддержка команды;
  • Прозрачные цели, четкие ожидания, здравый смысл в процессах и управленческих подходах.

Overview

  • Employer: Магнит
  • Job Title: Data engineer
  • Published: 8 months ago
Apply For This Job