Data Engineer (Миграция Hadoop на новый BigData)

Задачи:

• Анализ существующих решений;
• Переработка решений с помощью готовых кодогенераторов, иногда разработка с нуля по шаблонам;
• Наполнение документаций по разработанным решениям.

Требования:

• ЯП: SQL, Python;
• Apache Spark, Hadoop\S3\S3-like;
• Apache Airflow, Parquet;
• Знание Apache Iceberg будет плюсом;
• Jira + Confluence или аналогичное, Git, CI/CD, XML, JSON;
• Навыки системного анализа, тестирования;
• Базовое знание работы с РСУБД, Kafka.

Условия работы:

• Возможность совмещения с основным местом работы по ИП;
• Удаленный формат работы;
• Оформление по ТК РФ / ИП;
• Интересные задачи на крупных проектах;
• Возможность профессионального, карьерного роста.