Hadoop Infrastructure Engineer, Москва
Голосовой помощник Маруся является важным и одним из самых динамично растущих направлений VK.
Мы открываем двери в новое направление интерфейсов взаимодействия человека и компьютера. Мы разрабатываем девайсы, с которыми вы можете говорить, включать музыку, делать звонки, устанавливать будильник, управлять вашим списком покупок, а также управлять умным домом.
Направление «Умные устройства» в VK создает будущее взаимодействие между человеком и искусственным интеллектом! Мы разрабатываем девайсы, с которыми вы можете говорить, включать музыку, делать звонки, устанавливать будильник, управлять вашим списком покупок, а также управлять умным домом.
Прямо сейчас мы находимся в поиске DevOps-инженера в команду ИИ и прикладных исследований голосового помощника.
Задачи
- управление распределённым хранилищем данных (hdfs);
- разработка и поддержка регламентов пользования хранилищем;
- отслеживание потоков данных, разработка компонентов архивирования и очистки данных;
- поддержка баз данных hbase и доработка инфраструктурных компонентов hadoop;
- развитие системы мониторинга кластера.
Требования
- уверенное владение git, bash;
- хорошее знание Python и/или Java;
- коммуникабельность.
Будет плюсом
- опыт администрирования Hadoop кластера;
- опыт написания Hadoop\MapReduce\Spark задач;
- опыт работы и/или администрирования с Hbase;
- опыт работы и/или администрирования Apache Hadoop и компонентов (Kafka, Hive...);
- опыт траблшутинга проблем на кластере;
- опыт чтения кода и/или контрибьюшена в хадуп компоненты;
- опыт работы со средствами автоматизации сборки/доставки/тестирования: Jenkins, GitLab CI;
- опыт использования/администрирования: Nginx, MySQL, PostgreSQL, Docker.
Мы предлагаем
Голосовые технологии (Маруся)
Голосовой помощник Маруся является важным и одним из самых динамично растущих направлений VK. Мы открываем двери в новое направление интерфейсов взаимодействия человека и компьютера. Мы разрабатываем девайсы, с которыми вы можете говорить, включать музыку, делать звонки, устанавливать будильник, управлять вашим списком покупок, а также управлять умным домом.