Apache Hadoop

Что входит в курс

4 занятия. C трансляциями в прямом эфире и видеозаписями в личном кабинете.

3 лабы.Каждую неделю вам нужно будет решить лабораторную работу и суперачивку.

Чему вы научитесь?

• MapReduce. Научитесь писать MapReduce-джобы, используя Python. Узнаете об эффективных техниках и приемах, использования MapReduce: Map-only джобы, комбайнеры, распределенный кэш.
• HDFS. Научитесь работать с распределенным хранилищем HDFS, загружая из него и записывая в него данные. Узнаете об антипаттернах его использования, и ролях NameNode, Secondary NameNode, DataNode.
• HBase. Научитесь правильно создавать схему хранения данных в HBase, считывать и записывать данные, используя в том числе библиотеку HappyBase. Узнаете об антипаттернах хранения данных в HBase.
• Hive. Научитесь писать MapReduce-джобы, используя SQL-подобный язык в Hive. Узнаете, как использовать в Hive UDF-функции, написанные на Python.

Для кого этот курс?

• Разработчики. У вас есть опыт программирования, но не хватает знаний и умений в работе с Hadoop? В этом курсе вы научитесь использовать HDFS, HBase и Hive, писать MapReduce-джобы.
• Аналитики. Вы умеете анализировать данные, но требуется знание новых инструментов? Уже после первой недели вы научитесь разворачивать Hadoop-кластер в облаке и сможете использовать эти знания для пилотного проекта на
  работе.
• Менеджеры. Вы занимаетесь развитием продукта или подразделения? В этом курсе вы получите погружение в экосистему Hadoop, поймете юзкейсы использования этих инструментов, попробовав многие вещи своими руками.