Разработчик Hadoop/Big Data
Требования
Местоположение и тип занятости
Компания
Описание вакансии
Условия работы
Мы «КОРУС Консалтинг» - IT компания, предоставляем услуги по IT-консалтингу и автоматизации бизнес-процессов. Имена всех наших заказчиков тебе точно известны - это крупнейшие игроки на российском рынке. А нас на сегодняшний день уже больше 1000 человек.
Наш Департамент аналитических решений (ДАР) погружен во все современные направления в области работы с данными: внедрение BI-систем и систем аналитической отчетности; проектирование хранилищ и витрин данных; разработка в области продвинутой аналитики и больших данных; применение прикладных продуктов с использованием Machine Learning; внедрение решений в области управлениям данными (Data Governance, Data Quality ...); разработка методологии и стратегии работы с данными.
Часть технологий, которые уже активно используются в работе: Hadoop, PostgreSQL, GreenPlum, Arenadata, Informatica, Teradata, Oracle, SAS, Qlik, Microsoft Azure.
С нами ты будешь работать над самыми крупными проектами, изменяющими весь технологический ландшафт наших заказчиков - на рынке единицы проектов подобного уровня. Мы всеми силами стараемся сочетать сложные многоуровневые архитектуры и высокую экспертизу всех участников с дружественным форматом построения команды и это отлично получается!
О проекте: перед нами стоит задача трансформировать аналитический ландшафт нашего заказчика (банковская сфера), а именно объединить 4 отдельно функционирующих хранилища данных в Единую платформу данных на базе новых технологий.
У нас несколько команд, которые занимаются различными задачами в этом направлении, стек: Spark, Scala, Kafka, Airflow как оркестратор. В этом году мы наращиваем команду и находимся в поиске Hadoop/Big Data Разработчика.
Что нужно делать:
- Разработка хранимых процедур, агрегатов, ETL процессов в экосистеме Hadoop.
- Разработка комплексных систем интеграции витрин данных Hadoop с использованием Scala/Python on Spark + AirFlow.
- Согласование требований и подходов к реализации витрин.
- Участие в разработке архитектурных и технических стандартов.
Чего ждем:
- Опыт работы в роли разработчика на стеке Hadoop от 2-х лет.
- Опыт разработки приложений с использованием инструментария экосистемы Hadoop (Spark Streaming, Hbase, Spark SQL, Kafka, Hive, Impala, Hue и т.д.) от 2-х лет.
- Опыт промышленной разработки на Scala/Java/Python.
Будет здорово, если есть:
- Опыт участия в проектах построения систем класс Big Data/Data Lake.
- Знания типовых ETL инструментов (Informatica PC /Apache Nifi etc).
- Знание банковской специфики и продуктов среднего и малого бизнеса.
Бонусы
Что мы можем предложить:
- В вопросах компенсации ориентируемся на предложение кандидата: знаем рынок, но не хотим ставить ограничений.
- Интересные и сложные задачи, крупные проекты: мы работаем только с клиентами уровня large enterprise.
- Постоянный профессиональный и личный рост, самостоятельность в работе. Как одно из направлений развития мы предлагаем рост от разработчика до ведущего разработчика, далее тим-лид /архитектор.
- Возможность гибкого начала рабочего дня и работы из дома (у нас свободное посещение офиса для Москвы и Санкт-Петербурга и полная удаленка для коллег из остальных городов России).
- У нас нет бюрократии и бесконечных отчетов, а совещания только по необходимости и с четкой программой.
- Крутая корпоративная жизнь: образовательные и спортивные мероприятия, участие в социальных и экологических программах, вечеринки и регулярные тимбилдинги.
- Оформление в штат компании, согласно ТК РФ, “белая” заработная плата, ДМС и стандартные бенефиты (скидки на фитнес и курсы английского языка, сертификация).
Приходи к нам в команду, будем вместе создавать крутые и полезные вещи!