Senior Big Data Engineer

Команда Lamoda Tech совершает цифровую революцию в fashion и e-commerce: разрабатывает ML-решения для каталога из сотен тысяч товаров, автоматизирует распределительные центры, по всему СНГ налаживает систему доставки и движение курьеров так, чтобы клиент мог получить заказ в течение выбранных 15 минут. Мы ищем тех, кто с удовольствием пробует новое, не боится спросить совета у коллег и сам готов делиться опытом.

Чем предстоит заниматься:

• Проектировать архитектуру модели данных для realtime хранилища рекламной платформы;
• Строить отчетность, показывающую результат и эффективность открутки рекламной кампании в Real-time режиме;
• Обеспечивать качество данных в разных системах, проектировать Data Quality;
• Разрабатывать витрины для продуктовой аналитики рекламы;
• Оптимизировать действующие пайплайны на Spark - мониторить нагрузку на кластер и оптимальность затрачиваемых ресурсов;
• Проектировать хранилища данных на основе Hadoop и Clickhouse, настраивать производительность/мониторинг - думать над тем что и как грузить и в каких партициях;
• Решать задачи, связанные с внедрением облачной инфраструктуры;
• Создавать стабильные отказоустойчивые и масштабируемые аналитические сервисы;
• Анализировать и внедрять инструменты инжиниринга данных.

• Опыт работы с Clickhouse;
• Опыт работы со стеком Hadoop (YARN, HDFS, Hive);
• Опыт работы в Spark и Spark Streaming/Flink;
• Опыт в проектировании хранилищ систем near realtime отчетности;
• Понимание инфраструктуры Apache Kafka;
• Владение одним из языков программирования (Java, Scala).

Будет плюсом:

• Опыт сбора и обработки требований;
• Опыт работы с Docker.

• ДМС со стоматологией, телемедициной и программой поддержки ментального здоровья;
• Страхование жизни;
• Ежемесячные промокоды на Lamoda: два по 25%, два по 15% и в день рождения — 40%;
• Программа привилегий и скидок от BestBenefits;
• До 15 дней больничного в год оплачиваем в размере 100% от действующего оклада;
• Бесплатные юридические консультации;
• Дополнительные выходные в случае важных событий;
• Яркие мероприятия и много неформального общения.

Развитие для каждого:

• Опытный наставник для каждого новичка;
• Обучение и участие во внешних конференциях;
• Разговорный английский клуб и онлайн-библиотека MyBook;
• Помогаем развивать личный бренд, выступать на конференциях и писать статьи;
• Performance Review дважды в год, чтобы развиваться системно;
• Проводим митапы и demo-дни для обмена знаниями;
• Погружаем в fashion и каждый сезон знакомим с модными трендами.