Data Engineer

Местоположение и тип занятости

Москва · Можно удаленно

Описание вакансии

СГ«АльфаСтрахование», компания №1 в сфере машинного обучения и Big Data на рынке страхования, ищет Data Engineer'a в команду Машинного обучения и работы с данными.

Команда занимается задачами в области больших данных: обогащением данных профиля клиента, извлечением ценной информации из имеющихся данных в различных аспектах бизнеса, начиная от формирования наиболее оптимального приложения для клиента и заканчивая защитой бизнеса от мошенников с применением моделей машинного обучения.

Является ответственной за Hadoop-стек в компании, строит современный Feature Store и развивает платформу машинного обучения, совершенствует текущую систему хранения и управления данными.

Наш текущий стек: Python, Hadoop, Hive, Pyspark + Airflow, Feast, Kafka, NiFi, Gitlab, Jira/Confluence, Docker, Grafana, командная коммуникация - Slack;

Кандидату, успешно прошедшему собеседование, предстоит:

    • Заниматься разработкой новых data-пайплайнов с использованием Pyspark, Airflow.
    • Оптимизировать и автоматизировать существующие data-пайплайны и ETL-процессы.
    • Готовить витрины данных, в том числе из сырых логов.
    • Разрабатывать сервисы для данных и моделей машинного обучения.
    • Помогать Data Scientists в подготовке фичей для моделей машинного обучения.
    • Обеспечивать качество и непрерывность поставки данных

    Критерии успеха:

    • Высшее техническое образование
    • Опыт в DE от 6 месяцев
    • Прохождение обучающего курса DE (будет круто!)
    • Знакомство с Python
    • Знание SQL - опыт написания сложных запросов
    • Будет плюсом знание стека Hadoop (HDFS, YARN, Hive) - мы научим.
    • Иметь представление о работе в Spark и Airflow
    • Иметь представление\ Умение пользоваться Linux-консолью, GitLab


Бонусы

    Мы предлагаем:

    • Работа в крупнейшей страховой компании страны;
    • Возможность быть у истоков сбора и обработки данных и задавать стандарты;
    • Официальное оформление в штат компании;
    • Конкурентная заработная плата ;
    • График работы 5/2 (гибкое начало рабочего дня), гибридный график работы (возможность удаленной работы);
    • ДМС после испытательного срока (3 мес);
    • Оплачиваемый отпуск 28 календарных дней;
    • Оплачиваемый больничный;
    • Скидки на страхование;
    • Корпоративные программы от партнеров компании – банки, автосалоны, фитнес, изучение иностранных языков;
    • Внутрикорпоративное и внешнее обучение.

Дополнительные инструкции



    Ваш отклик

    Авторизуйтесь
    Откликаться на вакансии могут только зарегистрированные пользователи.