BI разработчик

Нам в Avito.ru в департамент BI очень нужен хороший разработчик, имеющий опыт работы с большими объемами данных. Одна из наших задач – используя внутренние данные, а также данные из открытых внешних источников улучшать понимание поведения и потребностей наших пользователей, а также положение Avito.ru на рынке. Avito.ru входит в Top-10 рунета по объёму трафика — 9 миллионов посетителей и 300 миллионов просмотров страниц в день и мы растём очень быстро. Обработкой и хранением этих больших объемов данных занимается выделенная команда, которая разработала уникальную инфраструктуру с использованием продвинутых технологий. Мы ищем человека в эту команду, которому интересна тематика Big Data и он хочет развиваться в этом направлении.

Мы ожидаем, что Вы:

• Реализовывали предобработку данных для загрузки на различных языках - Python, Perl, .Net, Java, C и.т.д.
• Уверенно знаете SQL и имеете опыт работы с реляционными СУБД
• Реализовывали системы регулярного обхода различных ресурсов в интернете и извлечения из них структурированной информации

• Получили высшее образование в области вычислительной математики, статистики, анализа данных и т.п. со средним баллом диплома не ниже 4,5
• Адекватны, хотите работать и учиться, не склонны к конфликтам

Не обязательно, но круто, если Вы:

• Имеете опыт работы с Big Data технологиями: Hadoop, HP Vertica
• Имеете опыт решения различных Data Science задач используя R/Python/Matlab/C и другие языки.

Вам предстоит:

• Разработать систему регулярного сбора данных из открытых источников
• Разработать систему дедупликации и очистки этих данных для дальнейшего анализа
• Развивать инфраструктуру работы с большими данными в Авито.