Моя работа включает в себя несколько проектов

1. Настройка и поддержка кластера Apache Kafka для сбора больших объёмов данны
2. Поддержка существующих проектов (преимущественно написаны на DSL от Nokia, с тестами на Ruby) 
3. Настройка и поддержка системы для мониторинга данных (Grafana для метрик, Kibana для данных, хранящихся в ES)
4. Настройка и поддержка кластера ElasticSearch, в котором хранятся данные полученные из Kafka кластер 
5. Разработка API (aiohttp, Python) для предоставления доступа к данным, хранящимся в ES и Impala

На данный момент, мною было изучено

1. Chef & Ansible - администрирование серверов
2. Apache Kafka & Apache Flume - построение распределенной системы для сбора данных
3. Vagrant - локальная разработка и тестирование
4. Jenkins - тестирование и подготовка релизов
5. ElasticSearch & Hadoop - хранение и анализ данных
6. Graphite & Grafana - мониторинг Apache Kafka & Flume
7. Kibana - анализ данных из ES
8. Flume API - написанил плагин для сбора метрик