Java разработчик (проект "Антиспам"), Санкт-Петербург
Мы ищем Java backend разработчика в команду проекта "Антиспам".
Платформа модерации команды антиспама отвечает за классификацию, кластеризацию и фильтрацию контента, а также обнаружение подозрительных пользователей.
Изначально платформа работала с данными проекта Одноклассники, но впоследствии к ней стали подключаться другие проекты из Mail.ru Group, такие, как Юла, Ситимобил, ICQ, Игры mail.ru. На данный момент платформа включает в себя свыше десятка сервисов, занимающих более 350 инстансов в трех датацентрах. Ежедневно мы проверяем около 50 миллионов фотографий, используя десятки нейронных моделей, проверяем более миллиона ссылок на сторонние сайты, прогоняем около 200 миллионов текстов через текстовые классификаторы. В пике наш основной сервис обрабатывает 500 тысяч удаленных вызовов в секунду.
Задачи
- Интеграция платформы модерации со внешними системами;
- Улучшения платформы модерации: разработка и подключение новых инструментов, построение общих пайплайнов модерации, поддержка отказоустойчивости и быстродействия системы;
- В дальнейшем, разработка хранилищ и инструментов обработки дополнительных типов контента, таких как аудио.
Требования
- Разработка ведется на Java. В схеме модерации используются Kafka и Cassandra, опыт работы с этими технологиями будет вашим преимуществом;
- В дальнейшем - способность самостоятельно подключать новые проекты к системе модерации, а также разработка общей схемы для ускорения подключения последующих проектов.
Мы предлагаем
Одноклассники
Одноклассники – одна из крупнейших социальных сетей. OK – самый высоконагруженный в мире сервис, написанный на Java. Большинство задач, которые возникают перед нами каждый день, не имеют готовых решений, поэтому мы используем большое количество собственных разработок.