Data Engineering

Data Engineer / ML Engineer Full-time

О компании и команде

X5 Digital развивает сервис онлайн-доставки.

Мы доставляем десятки тысяч заказов каждый день.

Наша цель — занять лидирующую позицию на рынке e-grocery и стать прямой ассоциацией с доставкой онлайн-заказов.

X5 Digital сегодня — это более 34 миллионов заказов в год,  350+  инженеров в IT-командах и сервис, который представлен уже в 69 регионах страны.

Вы считаете, что в подготовке данных для ML-инженерии необходимо реализовывать непростые валидационные схемы?
Тогда мы с вами на одной волне!
Не обещаем футболку с принтом "Garbage in, garbage out", но обеспечим безудержное веселье в работе с данными с подобающей инженерной культурой!

Наш стек: Linux, Bash, SQL, Spark (PySpark), Airflow, MLFlow, JupyterHub, Kafka, PostgreSQL, GreenPlum, ClickHouse и всё чем может порадовать DWH.


Чем предстоит заниматься

  • управлением источниками данных и подключением новых;
  • снабжением коллег данными своевременно и бесперебойно;
  • разработкой Flow подготовки данных для моделей машинного обучения с тестами и проверкой простых NFR;
  • взаимодействием с коллегами по вопросам подключения источников данных.

Ожидания от кандидата

  • уверенные знания Python 3, PyTest;
  • базовые знания алгоритмов и структур данных;
  • опыт работы с Linux, Airflow, PostgreSQL или GreenPlum;
  • умение подключать новые источники данных, работать с текущими, дорабатывать DataSet и не избегать версионирования;
  • умение разрабатывать и тестировать ETL-процедуры;
  • понимание принципов работы современных алгоритмов машинного обучения;
  • feature engineering является понятной для вас задачей.

Будет плюсом:

  • опыт работы с DVC;
  • опыт работы c Bash, Spark (PySpark), MLFlow, JupyterHub, Kafka, ClickHouse.

Условия работы

✔ работаем удаленно или из уютного офиса на ст. м. Добрынинская в Москве;
✔ предоставляем ДМС со стоматологией;
✔ помогаем с переездом в Москву при необходимости.

Бонусы

✔ делимся собственным опытом и знаниями;
✔ регулярно проводим митапы, приглашаем внешних спикеров;
✔ даем доступ к внутренним ресурсам: электронной библиотеке и корпоративному университету, где можно непрерывно обучаться.

Overview

  • Employer: X5 Digital
  • Job Title: Data Engineer / ML Engineer
  • Published: 11 months, 3 weeks ago
Apply For This Job