👀 Дизайнеры, с какой командой вы мэтчитесь по вайбам? Проверяйте на Вайб-чеке→ vibe.habr.com

Разработчик Hadoop/Big Data

Местоположение и тип занятости

Москва, Санкт-ПетербургПолный рабочий деньМожно удаленно

Компания

Одна из крупнейших российских ИТ-компаний

Описание вакансии

Условия работы

Мы «КОРУС Консалтинг» - IT компания, предоставляем услуги по IT-консалтингу и автоматизации бизнес-процессов. Имена всех наших заказчиков тебе точно известны - это крупнейшие игроки на российском рынке. А нас на сегодняшний день уже больше 1000 человек.

Наш Департамент аналитических решений (ДАР) погружен во все современные направления в области работы с данными: внедрение BI-систем и систем аналитической отчетности; проектирование хранилищ и витрин данных; разработка в области продвинутой аналитики и больших данных; применение прикладных продуктов с использованием Machine Learning; внедрение решений в области управлениям данными (Data Governance, Data Quality ...); разработка методологии и стратегии работы с данными.

Часть технологий, которые уже активно используются в работе: Hadoop, PostgreSQL, GreenPlum, Arenadata, Informatica, Teradata, Oracle, SAS, Qlik, Microsoft Azure.

С нами ты будешь работать над самыми крупными проектами, изменяющими весь технологический ландшафт наших заказчиков - на рынке единицы проектов подобного уровня. Мы всеми силами стараемся сочетать сложные многоуровневые архитектуры и высокую экспертизу всех участников с дружественным форматом построения команды и это отлично получается!

О проекте: перед нами стоит задача трансформировать аналитический ландшафт нашего заказчика (банковская сфера), а именно объединить 4 отдельно функционирующих хранилища данных в Единую платформу данных на базе новых технологий.

У нас несколько команд, которые занимаются различными задачами в этом направлении, стек: Spark, Scala, Kafka, Airflow как оркестратор. В этом году мы наращиваем команду и находимся в поиске Hadoop/Big Data Разработчика.

Что нужно делать:

  • Разработка хранимых процедур, агрегатов, ETL процессов в экосистеме Hadoop.
  • Разработка комплексных систем интеграции витрин данных Hadoop с использованием Scala/Python on Spark + AirFlow.
  • Согласование требований и подходов к реализации витрин.
  • Участие в разработке архитектурных и технических стандартов.

Чего ждем:

  • Опыт работы в роли разработчика на стеке Hadoop от 2-х лет.
  • Опыт разработки приложений с использованием инструментария экосистемы Hadoop (Spark Streaming, Hbase, Spark SQL, Kafka, Hive, Impala, Hue и т.д.) от 2-х лет.
  • Опыт промышленной разработки на Scala/Java/Python.

Будет здорово, если есть:

  • Опыт участия в проектах построения систем класс Big Data/Data Lake.
  • Знания типовых ETL инструментов (Informatica PC /Apache Nifi etc).
  • Знание банковской специфики и продуктов среднего и малого бизнеса.

Бонусы

Что мы можем предложить:

  • В вопросах компенсации ориентируемся на предложение кандидата: знаем рынок, но не хотим ставить ограничений.
  • Интересные и сложные задачи, крупные проекты: мы работаем только с клиентами уровня large enterprise.
  • Постоянный профессиональный и личный рост, самостоятельность в работе. Как одно из направлений развития мы предлагаем рост от разработчика до ведущего разработчика, далее тим-лид /архитектор.
  • Возможность гибкого начала рабочего дня и работы из дома (у нас свободное посещение офиса для Москвы и Санкт-Петербурга и полная удаленка для коллег из остальных городов России).
  • У нас нет бюрократии и бесконечных отчетов, а совещания только по необходимости и с четкой программой.
  • Крутая корпоративная жизнь: образовательные и спортивные мероприятия, участие в социальных и экологических программах, вечеринки и регулярные тимбилдинги.
  • Оформление в штат компании, согласно ТК РФ, “белая” заработная плата, ДМС и стандартные бенефиты (скидки на фитнес и курсы английского языка, сертификация).

Приходи к нам в команду, будем вместе создавать крутые и полезные вещи!