Data Engineer (Big Data)
Требования
Местоположение и тип занятости
Компания
Описание вакансии
Big Data в МТС - автономная IT площадка. Нас уже 290 человек, мы трансформируем классическое аналитическое хранилище в data lake ведущей технологической компании. Уже сегодня на аналитике Big Data основывается принятие многих стратегических решений в компании. А в перспективе на ней будет базироваться вся экосистема продуктов МТС.
Во внешних проектах Big Data МТС востребована в финансовом скоринге, транспортном планировании, логистике, таргетинге наружной и digital-рекламы, электронной коммерции, ритейле, градостроительных проектах и др.
Вы будете отвечать за:
- Feature engineering для Data Science задач, нормализация данных, сглаживание локальных экстремумов, создание прототипов для задач интеграции;
- Задачи по сбору данных, их очистке и исследованию качества данных;
- Сборку витрин в соответствии с бизнес-задачами и отраслевыми практиками;
- Создание прототипов, прогностических моделей и доказательств концепций.
Опыт и навыки, на который мы рассчитываем:
- Опыт работы с данными в одной из отраслей: телеком, интернет-компании, банки, страхование, ритейл
- Понимание моделей данных и принципов устройства хранилищ данных
- Хорошее знание SQL
- Опыт работы хотя бы с одной промышленной БД
- Знание стека Hadoop/Hive/Spark и опыт работы с большими объемами данных
- Знание одного из языков программирования: Python, Scala
- Навыки загрузки данных из неструктурированных источников (data exploration, data wrangling, data cleansing)
- Умение работать в Unix консоли, базовое понимание (как минимум умение читать) shell scripts
- Хорошее знание технического английского, навыки поиска информации
Дополнительно:
- Умение работать с системами контроля версий и CI (git, jenkins)
- Опыт работы с планировщиками задач (oozie, airflow, cron)
- SQL stored procedures (например, Teradata и/или Oracle и/или Postgress)
- Знакомство с ETL инструментарием
- Навыки scrapping/web crawling (phantom)
- Опыт создания REST сервисов
- Знания в области математической статистики и машинного обучения.
Бонусы
Есть ли обучение? Локальные и международные конференции, митапы. Углубленные курсы от производителей ПО. Корпоративный университет МТС. Масштабная виртуальная библиотека. Чемпионаты по программированию.
Какой график? Гибкий, начало работы в промежутке с 8 до 11. Есть возможность работать несколько дней вне офиса (по договоренности). 2 раза в год напряженный период во время защиты бюджетов, компенсируем 3 днями к отпуску.
Условия. Каждый месяц - аванс и зарплата, дважды в год - премия. Бонусом – ДМС + стоматология, корпоративная связь, страхование жизни, в т.ч. при выезде за границу, специальные предложения от партнеров и друзей МТС.
Дополнительные инструкции
Куда откликаться? На почту ysozhogi@mts.ru или телеграм @ysozhogi