Обязанности

Разработка и проектирование витрин в облаке данных в среде Hadoop (Java 8 ООП, Spark, Hive, oozie, HDFS, YARN).

Оптимизация и настройка производительности Batch Job Hadoop, для оптимального выделения ресурсов YARN, а также диагностика и мониторинг работающих Job Hadoop.

Разработка и имплементация математических моделей расчета отклонений и прогнозирования на базе массивов данных.

Разработка системной архитектуры в технологическом стеке Hadoop.

Участие в разработке DevOps процедур.

Самостоятельное тестирование и активное участие во взаимодействии с другими командами на этапе вывода решения в промышленную среду.

Требования

Знания принципов построения распределенных систем хранения и обработки данных.

Уровень программирования Java не ниже regular developer.

Навыки работы с Unix shell.

Понимание алгоритмов работы Spark.

Опыт работы с реляционными СУБД (Oracle, MS/SQL), навыки оптимизации запросов.

Навыки / желание изучить разработки ETL- Informatica Big Data Edition.

Мы предлагаем:

Работу в команде единомышленников, неравнодушных к передовым технологиям и практикам;

Неограниченные возможности для совершенствования ваших навыков и знаний, обучаясь у лучших и решая сверхамбициозные задачи;

Позитивную рабочую атмосферу, дружный коллектив

Достойную и конкурентную заработную плату, квартальные и годовые премии, размер которых зависит от результатов вашей работы;

Разнообразный социальный пакет: ДМС, страхование жизни, страхование для выезжающих за границу, льготные условия приобретения банковских продуктов,скидки в фитнес-клубах и в компаниях-партнерах.