Data engineer
Требования
Местоположение и тип занятости
Компания
Описание вакансии
О компании и команде
Наша команда каждый день работает над повышением качества связи и отвечает за стабильный сервис для тебя. Профессионалы билайн уверенно создают надежную связь по всей территории нашей страны: в небольших поселках и крупных городах, на вершинах гор и под землей.
Мы формируем команду под разработку нового Антифрод продукта, у вас будет возможность поучаствовать в разработке с нуля.
Если ты готовы решать сложные и масштабные задачи в команде экспертов — мы ждем твое резюме!
Итак, вам предстоит:
Разрабатывать ETL процессы Spark на Scala (потоковая обработка как преимущество);
Использовать AirFlow или другие оркестраторы – Oozie, Luigi, ну или cron;
Понимать принципы работы реляционных СУБД и HDFS;
Понимать подходы к работе с качеством данных;
Анализировать требования к витринам данных (взаимодействие с владельцем продукта, BI-разработчиками, data scientist-ами);
Оценивать пригодность, качество исходных данных.
Мы будем рады рассмотреть вашу кандидатуру, если у вас есть:
Опыт разработки ETL процессов на Spark ;
Опыт оркестрации ETL процессов в Airflow ;
Проектирование баз данных;
Создание конвейеров данных NiFi
Что мы предлагаем:
Сплоченную команду профессионалов, в которой можно не только успешно реализовывать проекты, но и перенимать опыт и развиваться;
Обучение, участие в интересных проектах и расширение профессиональной экспертизы: мы участвуем в конференциях, митапах и публикуемся на Хабр и т.д.;
Конструктивную и открытую рабочую атмосферу;
Полис добровольного медицинского страхования, обслуживаемый в лучших клиниках;
Корпоративные скидки на фитнес, обучение, путешествия и т.п.;
Служебную сотовую связь;
Возможность работать в гибридном формате на территории РФ*
* посещение офиса может быть исключено по согласованию с руководителем
Ожидания от кандидата
Условия работы
Бонусы