Hadoop администратор (Big Data)

Big Data МТС – место, где телеком данные превращаются в реально работающие IT-продукты. Мы создали и протестировали несколько десятков сервисов. Самые успешные из них уже стали частью экосистемы МТС. Например, МТС Маркетолог, рекомендации в KION (МТС ТВ), услуга “Кто звонит?” или Спам blacklist

Команда центра Big Data находится в поиске Hadoop администратора в команду, которая занимается разработкой собственного дистрибутива и поддержкой кластеров Hadoop

Стек технологий: Hadoop, Hortonworks, Cloudera, Hive, HDFS, Spark, Kafka, Arenadata

Что нужно делать:

• Разработка собственного дистрибутива Hadoop, замена HDP и CDH
• Обеспечение CI/DI процессами всех компонентов дистрибутива
• Эксплуатация кластеров для работы с большими данными (стек: Hadoop, Hbase, Hive, Spark, Ozone, Kafka)
• Разработка инструментов для автоматизации и мониторинга
• Участие в разработке собственной платформы для работы с большими данными.

Требования:

Обязательно:

• Опыт работы с Hadoop кластерами (разворачивание, тюнинг, конфигурирования, траблшутинг)
• Опыт работы с Kubernetes
• Опыт построения CI\CD pipeline (Jenkins или GitLab CI)
• Опыт работы с системами управления конфигурациями и деплоя (мы используем ansible)
• Понимание работы JVM
• Хорошее знание SQL
• Английский язык на уровне свободного чтения технической документации

Желательно: 

• знание принципов работы Kerberos
• знание принципов работы сети и виртуализации
• знание языков Python, GoLang, Java
• опыт работы с rest api
• опыт работы с ELK

Условия:

• График работы: плавающее начало рабочего дня, гибридный график (или возможность работать из дома)
• Условия и бонусы: ДМС, куда включены: стоматология, страхование жизни и страховка при поездках за рубеж
• Десятки курсов и тренингов в Корпоративном университете МТС, «Coursera» и Собственная виртуальная библиотека
• Корпоративный психолог и карьерный коуч
• Спорт: компенсация фитнес-абонемента, бассейна, скидка в «Alex fitness», «Spirit fitness», «World class» и др
• Бесплатная сотовая связь, выгодные тарифы для ваших близких, промокод на онлайн-кинотеатр KION и бесплатная подписка на МТС Premium
• Программа performance-review