Data Engineering

Администратор BigData Full-time

О компании и команде

В группу сопровождения технологий BigData требуется администратор BigData. Группа занимается администрированием распределенных систем hadoop, clickhouse, opensourse на linux с контейниризацией, выстраивает процессы разработки пайплайнов для даталейка, обеспечивает масштабируемость кластеров и тиражирования.

Обязанности

  • Администрирование кластера Hadoop;
  • Администрирование Clickhouse кластер open source;
  • Диагностика и решение проблем совместимости библиотек spark, hive, hdfs, java приложений;
  • Мониторинг Prometheus (Grafana);
  • Сборка и поддержка Docker образов;
  • Работа с Artifactory, Marathon, Kubernetes, AirFlow, Notebook Jupiter;
  • Написание скриптов для мониторинга, деплоя и автоматизации процессов (bash, python, ansible).

Ожидания от кандидата

  • Администрирование Hadoop3 Vanilla, Clickhouse, mesos-marathon, kubernetes, docker images, linux OEL, apache spark;
  • Написание скриптов в bash, python, ansible.

Условия работы

  • Формат работы на выбор: офис/гибрид/удаленка
  • Участие в проекте кафетерия льгот (ДМС, спорт, мобильная связь, обучение, впечатление (отдых за городом));
  • Полугодовые премии;
  • Обучение и развитие (как внутреннее, так и внешнее) + корпоративные скидки на Skyeng, Lerna (Skillbox, Geekbrains), Яндекс Практикум, Language Link, Novakid;
  • Скидка на питание в офисе компании;
  • Корпоративная скидка 30% на товары компании;
  • Программа лояльности - льготные тарифы в фитнес-центры (World Class, X-fit, Fitmost), скидка на медицинские услуги KDL и Invitro, специальные условия от банков-партнеров и мобильная связь (Мегафон и Билайн), возможность приобретать билеты с корпоративной скидкой на спортивные мероприятия, в театры (Сатирикон, МДМ), Kidzania, экскурсии Tripster и многое другое;
  • Подарки к новому году (для сотрудников и детей);
  • Паркинг (через бронирование).

Overview

  • Employer: SM Lab
  • Job Title: Администратор BigData
  • Published: 1 year ago
Apply For This Job