Lead Data Engineer
Требования
Местоположение и тип занятости
Компания
Описание вакансии
Условия работы
Команда GeekBrains.ru создает образовательный портал, позволяющий начать карьеру в digital с нуля или получить новые навыки для ее развития. Мы верим, что обучение через интернет в ближайшие 10 лет станет одной из самых востребованных услуг. Это удобно, эффективно и экономично. Миллион пользователей, пришедших к нам за год, — отличное тому подтверждение. Успешным результатом своей работы мы считаем трудоустройство выпускника. У нас более 150 курсов по всем популярным digital-специальностям, онлайн-университет с 25 факультетами, партнерские отношения с десятками IT-компаний для трудоустройства студентов и сотни тысяч положительных отзывов учеников, опубликованных на сайте. Мы оцениваем результаты студентов, а они в свою очередь оценивают преподавателей, чтобы мы могли постоянно совершенствовать учебный процесс.
GeekBrains в цифрах:
- обучение ведется по 30 различным digital-специальностям;
- на сайте зарегистрировались и получили доступ к уникальным учебным материалам более 3,5 млн человек;
- ежемесячно на платных курсах начинают обучение свыше 1100 человек;
- ежегодно обучаются бесплатно около 300 тыс. человек.
Чем предстоит заниматься:
- участие в проектах по автоматизации сбора и анализа данных из различных источников;
- обработка и парсинг "сырых" данных;
- обеспечение процесса ETL/ELT;
- написание сервисов для работы с внешними источниками данных;
- сопровождение хранилища данных;
- администрирование сервера и мониторинг нагрузки.
Что мы ждем от вас:
- опыт в проектировании и реализации хранилищ данных;
- уверенное знание SQL;
- опыт работы с Postgres;
- знание подходов и лучших практик ETL / ELT;
- консоль Linux;
- опыт разработки ETL процессов на Python - предпочтительно Luigi, Airflow;
- опыт работы с Git;
- опыт работы с очередями - Kafka, RabbitMQ и т.п;
- желателен опыт с мониторингом Grafana/Kibana, ClickHouse или другими колоночными СУБД.
Бонусы
Что мы предлагаем:
- возможность стать частью уникального быстрорастущего проекта с амбициозными задачами по масштабированию;
- бесплатное обучение на любых курсах GeekBrains;
- скидки от партнеров;
- ДМС;
- официальное трудоустройство;
- любое оборудование для продуктивной работы;
- отличный офис с бесплатным кофе и снеками у м. «Маяковская»/«Чеховская».
Почему у нас хорошо:
- динамичная среда для реализации масштабных проектов;
- нетривиальные задачи, которые помогут тебе профессионально развиваться;
- команда, любящая свою работу.