Администратор Hadoop

SberDevices — департамент Сбера, занимающийся разработкой устройств, а также платформ NLP, распознавания и синтеза речи. Мы разрабатываем десятки сервисов автоматизации общения с клиентами, а также запустили уникальные на российском рынке устройства с виртуальными ассистентами. И запустим еще.

Мы находимся в поиске Администратора Hadoop в DataGalaxy – команду по построению DataLake на базе Hadoop – единой аналитической платформы, включающей инструменты по сбору, хранению, обработке и анализу данных для всех SberDevices.

Наш стек технологий: RHEL7, Hadoop, Spark2/3, Airflow, Prometheus, Grafana, Nginx.

Какие задачи предстоит решать:

• Решение проблем с функционированием Hadoop кластеров на уровне основных служб
• Построение нестандартных мониторингов и систем аудита по Hadoop-кластерам
• Решение проблем с безопасностью с Kerberos/Ranger/Knoxx
• Помощь разработчикам в решении проблем с задачами
• Апгрейды кластеров, резервное копирование
• Планирование кластерной инфраструктуры
• Установка и настройка нестандартного софта связанного с BigData задачами

Наши ожидания по опыту и знаниям:

• Опыт администрирования платформы Hadoop от 2-х лет
• Опыт администрирования ОС Linux
• Желание и способность самостоятельно изучать новые Big Data технологии, постоянное самосовершенствование и развитие.

Условия:

• Официальное трудоустройство согласно ТК РФ
• Возможность обучения за счет компании
• Страхование (от несчастных случаев, ДМС)
• Оздоровительные программы для детей сотрудников
• Дисконт-программы от компаний партнеров (фитнес, страхование, туризм)
• Льготное кредитование
• Столовая, бесплатный тренажерный зал на территории офиса
• Место работы - ст.м. Кутузовская.