Big Data Engineer
Зарплата
Требования
Местоположение и тип занятости
Компания
Описание вакансии
Условия работы
ЕАПТЕКА – одна из крупнейших интернет-аптек в России*. Мы меняем индустрию, чтобы сделать здоровье доступным для всех
Сейчас компания работает по всей России от Калининграда до Владивостока. Собственная сеть аптек - хабов превышает 100, а сеть пунктов самовывоза – 10 000.
Сервис федерального масштаба в сегменте e-pharm строит сильная ИТ команда, разрабатывая надежную технологическую платформу, которая помогает клиентам заказывать лекарства и товары для здоровья онлайн.
Мы ждем в команде ответственных, проактивных и надежных людей, чтобы вместе развивать сервис, который делает жизнь лучше.
Eapteka с нуля создает платформу BigData и формирует команду, которая будет строить платформу данных на базе Hadoop в облаке. И мы в поиске мощных DE в отдел управления данными команды BigData.
Стек: Scala, Python, Hadoop, Spark / PySpark, Kafka, Airflow, Docker, SQL
🔗 Чем предстоит заниматься?
— Участвовать в разработке и проектировании потоков данных, алгоритмов загрузки и обработки данных в Hadoop в cтриминговом и батчевом режиме на базе Apache Spark;
— Оптимизировать производительность ETL-процессов;
— Настраивать CI/CD процесс вместе с DevOps;
— Участвовать в разработке продуктов моделей ML совместно с DS.
🔗 Что бы мы хотели видеть в нашем сотруднике?
— Опыт разработки на Scala или Python (уровень: middle, senior);
— Опыт разработки на Spark и Spark Structured Streaming;
— Опыт работы с Hadoop (уверенное знание);
— Опыт работы с облачными платформами (Яндекс Облако/VK Cloud/Google Cloud);
— Опыт работы с Kafka (уверенное использование);
— Docker, docker-compose, (k8 будет плюсом);
— Опыт работы с Airflow;
— Linux, Bash;
— Git;
— СI/CD;
— SQL;
— Проактивность и желание развиваться.
Бонусы
🔗 От нас:
— Официальное трудоустройство, белая зп;
— Работа в аккредитованной ИТ компании;
— Гибридный/удаленный график работы;
— ДМС со стоматологией в лучших клиниках города;
— Возможность развития в крупной компании;
— Современная техника на выбор;
— Опыт работы в команде профессионалов.