Data engineer (Big Data)

Сейчас мы ищем Data инженеров на несколько продуктов Big Data, есть возможность выбрать наиболее интересный для себя, вот некоторые из них:

• Центр RnD (рекламная платформа МТС. Сейчас это SSP, DSP.
  Добавится еще своя аналитика. Плюс будут расширяться возможности DSP.
  В основном с этими тремя сущностями и будет проводиться работа: SSP, DSP, Аналитическая система);
• Продвижение Финансовых Сервисов МТС Банка (Продукт направлен на увеличение эффективности продвижения продуктов Финтеха МТС через управление сегментами персонализированных коммуникаций.
  Включает в себя три составляющих:
  1) Единая система рекомендаций - генерирует регулярные сегменты для устоявшихся направлений
  2) R&D лидогенерация - проверяет продуктовые гипотезы
  3) Персонализация - дифференцирует клиентов для выбора наиболее
  подходящего подхода к каждому из них, управляет сегментами
  промо-кампаний для клиентов Daily Banking);
• МТС ID Scan (Сервис МТС ID Scan по верификации работает над подтверждением данных, которые пользователи предоставляют организациям. Наши клиенты – это В2В разных форматов (банки, брокеры, страховые компании и пр.). С нашей помощью процесс проверки пользователей для них составляет 7 секунд. Мы не просто проверяем данные, но и позволяем исправить ошибки при вводе данных, обеспечиваем их актуализацию во внутренних системах клиентов. Вам предстоит работать с big data, API-интеграциями с базами данных, различными способами идентификации пользователей);
• Smart Rollout (продукт является системой поддержки принятия решений по базовым станциям, относится к классу BI систем, предназначен для сотрудников МТС, принимающих решения по строительству базовых станций)

Кого мы ищем?

• Опыт работы с данными в одной из отраслей: телеком, интернет-компании, банки, страхование, ритейл
• Понимание моделей данных и принципов устройства хранилищ данных
• Хорошее знание SQL
• Опыт работы хотя бы с одной промышленной БД
• Знание стека Hadoop/Hive/Spark и опыт работы с большими объемами данных
• Знание одного из языков программирования: Python, Scala
• Навыки загрузки данных из неструктурированных источников (data exploration, data wrangling, data cleansing)
• Умение работать в Unix консоли, базовое понимание (как минимум умение читать) shell scripts
• Хорошее знание технического английского, навыки поиска информации

Что вы найдете в команде Big Data?

Стек технологий:

• данные храним в Hadoop, обрабатываем на Spark (Pyspark, Scala) и SQL
• разрабатываем на python3: R&D делаем в Jupyter, продуктивизируем в PyCharm
• храним код в gitlab, регулярные процессы запускаем через Airflow
• управляем задачами через Jira и Confluence

Команда: в команде Data engineer сейчас 30 человек (во всей Big Data МТС более 300 человек). Все Data инженеры разработчики поделены на группы со своими лидами. Каждую неделю мы обмениваемся опытом на совместных синках.

Data инженеры работают в продуктах со своей автономной командой, в которой есть все роли: аналитики, DS, разработчики, девопсы, менеджеры продукта.

Каждый месяц - аванс и зарплата, дважды в год - премия (20% от годового оклада), есть система ревью. ДМС + стоматология, корпоративная связь, специальные предложения от партнеров и друзей МТС, отпуск 31 день в год. Есть своя корпоративная академия, подписки на Coursera и O’Reilly, внутреннее обучение. Выдаем 16” MacBook Pro, hp или Dell на выбор.