В команду, занимающуюся анализом и хранением данных, ищем человека на роль Junior Data Engineer. Основные задачи команды – это построение и оптимизация ETL-процессов на базе Hadoop-стека.

Мы ожидаем хорошее представление о принципах работы с данными, принципах работы распределенных систем, понимание алгоритмов их обработки и умение работать без четких ТЗ, плотно взаимодействуя с заказчиком. Конкретный опыт с теми или иными технологиями не сильно критичен.

Задачи

• построение новых и оптимизация существующих ETL- процессов, преимущественно на Spark + Java;
• ad-hoc задачи по подготовке данных, их автоматизация;
• участие в доработках платформы и фреймворков для расчетов;
• анализ сырых данных, построение модели данных.

Требования

• навык и/или понимание принципов эффективной работы с большими объемами данных (SQL, Spark);
• понимание принципов работы распределенных систем;
• знание базовых алгоритмов и структур хранения данных;
• понимание концепций ООП.

Будет плюсом

• Прохождение образовательных курсов по big data;
• Опыт работы/участие в учебных проектах с Hadoop-стеком;
• Опыт программирования на Java.