Data Engineering

Spark developer Full-time

О компании и команде

Bell Integrator – один из ведущих системных интеграторов страны. Мы являемся аккредитованной ИТ-компанией.

Bell Integrator активно реализует проекты по всей России, среди наших заказчиков – крупнейшие системообразующие финансовые, телеком и ритейл компании страны.

Проект: Мы молодая, амбициозная команда, занимающаяся разработкой ETL-решений, для Корпоративно-Инвестиционного Бизнеса (Департамент Глобальных Рынков).

В настоящее время идет активная разработка по требованиям Этапа 1 - создания единого централизованного хранилища на платформе Hadoop. Мы используем широкий спектр современных технологий: фреймворк на основе Apache Spark, облачные технологии и микросервисы для создания ETL процессов.

Ожидания от кандидата

  • Знание и опыт работы с Apache Spark (от 1 года).
  • Опыт разработки ETL процессов приложений с использованием Apache Spark;
  • Знание Java 8;
  • Знание SQL. Умение писать и оптимизировать запросы к БД.
  • Опыт работы с DWH, DataVault
  • Опыт работы с Hadoop, HDFS, Hive
  • Опыт разработки приложений с использованием Spring, Spring Boot. Понимание принципов работы;
  • Знание технологий SQL, Hadoop, REST, XML, JSON, HTTP;
  • Опыт разработки клиент-серверных приложений.
  • Опыт работы с jira, confluence, Maven, git, Jenkins, Bitbucket, Sonar;
  • Опыт проведения кодревью;
  • Опыт написания модульных и интеграционных тестов (JUnit, Mockito)
  • Понимание основных шаблонов проектирования и принципов ООПб принципов построения ETL процессов;
  • Умение оптимизировать и тестировать код;

Желательно:

  • Опыт работы с ETL инструментами (Informatica PowerCenter, Microsoft SSIS, IBM DataStage и т.п.);
  • Опыт проектирования микросервисной архитектуры;
  • Знание других языков программирование (Scala, JavaScript, Kotlin, Python, …);
  • Опыт работы с Базами Данных (Oracle, PostgeSQL, NoSQL);
  • Опыт работы с Apache Kafka, IBM MQ;
  • Опыт работы с Tomсat, Jetty, WebSphere, Spring Boot;
  • Опыт работы с OpenShift(Kubernetes), Istio;
  • Опыт работы с Nginx;

Задачи:

  • Создание нового перспективного направления -создание единого централизованного многослойного хранилища BigData для всей экосистемы банка.
  • Разрабатывать абсолютно новые сервисы, которыми будут обрабатывать огромные массивы данных;
  • Глубоко погрузиться во все аспекты современных ИТ технологий (фронтальные и бэк системы, облачные технологии, интеграция с внешними и внутренними системами, Искусственный Интеллект и Большие Данные);
  • Работать в Agile командах и применять самые современные методы разработки;

Условия работы

  • Возможность профессионального и карьерного роста в компании, возможность поучаствовать в разных проектах;
  • Опыт работы в распределенной команде профессионалов;
  • Уровень заработной платы обсуждается индивидуально;
  • Возможность работать удаленно на территории РФ.

Overview

  • Employer: Bell Integrator
  • Job Title: Spark developer
  • Published: 1 year, 1 month ago
Apply For This Job