Data Engineering

Разработчик DWH/SQL/Python (офис) Full-time

О компании и команде

Проект по разработке КХД крупного российского банка в области оценки рисков розничного и корпоративного бизнеса.

Используемый стек: Hadoop, SQL,Python

Ожидания от кандидата

ЧЕМ ТЫ БУДЕШЬ ЗАНИМАТЬСЯ:

  • Развитием КХД в соответствии с правилами и стандартами разработки;
  • Анализом взаимосвязей объектов КХД, их атрибутов Source-to-Target;
  • Разработкой ETL потоков для построения витрин (от получения требований до вывода в промышленную эксплуатацию);
  • Разработкой прототипа трансформации, проведением ревью кода, написанием тестовых сценариев по своим задачам, созданием артефактов проектной документации;
  • Анализом фичей и запуском моделей скоринга на базе нейросети;
  • Оптимизацией ETL потоков для уменьшения загрузки кластера, времени блокировок;
  • Построением и установкой патчей на окружения с использованием отлаженных механизмов CI\CD;
  • Разбором ошибок работы ETL потоков на кластере.

ТЫ НАШ ИДЕАЛЬНЫЙ КАНДИДАТ, ЕСЛИ У ТЕБЯ:
  • Уверенное знание SQL;
  • Понимание основ Hadoop;
  • Опыт разработки pySpark/Python ;
  • Понимание принципов организации DWH, слоев;
  • Владение GIT.



СОВСЕМ КРУТО, ЕСЛИ ТЫ ИМЕЕШЬ:

  • Умение комплексно проработать задачу с учётом факторов, влияющих и зависимых на контекст задачи;
  • Понимание моделей данных: 3N-форма, Звезда;
  • Опыт работа с реляционными базами данных, индексированием, партицированием, статистикой;
  • Понимание архитектуры КХД;
  • Понимание ETL-процессов;
  • Уверенной знание SQL в любой из нотаций (желательно Hive, Spark SQL) – соединение и агрегация данных, временные не материализованные представления, оконные функции, оптимизация запроса.

Условия работы

У НАС ТЫ СМОЖЕШЬ НАЙТИ:

  • Full time офисная вакансия, 2 минуты от станции метро "Волгоградский проспект", просторная парковка для автовладельцев;
  • Официальное трудоустройство по ТК РФ;
  • Амбициозные задачи и проекты;
  • Работа в команде профессионалов в доброжелательной атмосфере;
  • Подключение к программе ДМС (включает стоматологию, обследования, лечение заболеваний и т.д.), а также возможность страхования родственников по корпоративной цене;
  • Корпоративное обучение и развитие (портал обучения и развития удаленным доступом 24/7; собственный Центр развития компетенций);
  • Насыщенная корпоративная жизнь: яркие корпоративы, праздники для детей сотрудников, корпоративные спортивные мероприятия; мотивационные награждения.

Overview

  • Employer: Neoflex
  • Job Title: Разработчик DWH/SQL/Python (офис)
  • Published: 7 months, 3 weeks ago
Apply For This Job