Data Engineer
Требования
Местоположение и тип занятости
Компания
Заказная разработка программного обеспечения
Описание вакансии
Условия работы
Компания Usetech основана в 2006 году и все эти годы мы идем в ногу со временем и технологиями, создаем инновационные продукты и работаем с лучшими мировыми практиками. Но главное для нас – это наши люди, мы – надежный и заботливый работодатель!
Приглашаем Data Engineer к нам в команду.
Задачи:
- Обеспечить сбор и организовать процесс загрузки данных в аналитические системы, включая получение структурированных и неструктурированных данных из различных источников, подготовку, очистку и предобработку данных из внешних источников, построение агрегатов;
- Создавать и улучшать процессы обработки данных;
- Разрабатывать схемы подключения новых источников в единую аналитическую БД (GreenPlum);
- Принимать участие в архитектурных решениях;
- Разрабатывать процедуры формирования детального слоя данных и слоя витрин единой аналитической БД (GreenPlum);
- Реализовывать процессы CI/CD и мониторинга разработанных процессов обработки данных (Grafana, Prometheus);
- Писать manual и automated DQ тесты;
- Документировать свою работу в Confluence;
- Работать в Jira.
Мы ожидаем:
- Опыт работы с системами контроля версий (Git);
- Знания принципов работы БД, построения ХД;
- Уверенное владение Python;
- Опыт работы разработки ETL процессов (SSIS, NiFi, Pentaho, Informatica, Spark, Airflow);
- Опыт работы с высоконагруженными распределенными системами хранения и обработки данных;
- Отличное знание SQL, опыт оптимизации запросов;
- Опыт самостоятельного ведения проектов, прямого общения с бизнесом;
- Желание обучаться и развиваться.
Будет круто если ты:
- Готов развивать вместе наши принципы и компетенции;
- Имеешь опыт работы с оркестраторами Airflow, Nifi;
- Имеешь опыт работы с БД GreenPlum, Clickhouse, BigQuery;
- Владеешь английским языком от upper intermediate.
Мы предлагаем:
- Работу в компании, которая много лет входит в топы самых престижных рейтингов – один из 25 лучших работодателей России 2020 по версии HeadHunter, 1-ое место в ежегодном рейтинге «Самые лояльные сотрудники 2020» от HeadHunter и 7 место рейтинга «Лидеры ИТ и Интернет индустрии России»;
- Удаленка – наше все, но также можно (а иногда нужно) выйти поработать в офис. А там – не только комфортное рабочее место, но и комната отдыха с приставкой, настольным футболом, пинг-понгом, а также чаем/кофе с печеньками и прочими плюшками;
- Трудоустройство – только официальное по ТК РФ и в штат компании, бессрочный трудовой договор прилагается;
- Рабочий график 5/2, гибкое сочетание офисной и удаленной работы;
- Полис медицинского страхования (ДМС + стоматология для сотрудников, скидки на страхование для членов семьи);
- Подарки, скидки и сертификаты для детей сотрудников;
- Оплата обучения и сертификаций;
- Регулярные внутренние семинары под эгидой Корпоративного Университета, посвященные новым технологиям и самым актуальным темам в области разработки, аналитики, тестирования, управления;
- Usetech English Club – обучение английскому с корпоративными скидками, разговорный клуб;
- Инкубатор продуктовых идей – реализация перспективной идеи продукта или услуги с поддержкой Компании;
- Программа лояльности, основанная на геймификации – возможность заработать внутрикорпоративную валюту за различные достижения и потратить её в онлайн-магазине Компании.