Мы ищем Java backend разработчика в команду проекта "Антиспам".

Платформа модерации команды антиспама отвечает за классификацию, кластеризацию и фильтрацию контента, а также обнаружение подозрительных пользователей.
Изначально платформа работала с данными проекта Одноклассники, но впоследствии к ней стали подключаться другие проекты из Mail.ru Group, такие, как Юла, Ситимобил, ICQ, Игры mail.ru. На данный момент платформа включает в себя свыше десятка сервисов, занимающих более 350 инстансов в трех датацентрах. Ежедневно мы проверяем около 50 миллионов фотографий, используя десятки нейронных моделей, проверяем более миллиона ссылок на сторонние сайты, прогоняем около 200 миллионов текстов через текстовые классификаторы. В пике наш основной сервис обрабатывает 500 тысяч удаленных вызовов в секунду.

Задачи

• Интеграция платформы модерации со внешними системами;
• Улучшения платформы модерации: разработка и подключение новых инструментов, построение общих пайплайнов модерации, поддержка отказоустойчивости и быстродействия системы;
• В дальнейшем, разработка хранилищ и инструментов обработки дополнительных типов контента, таких как аудио.

Требования

• Разработка ведется на Java. В схеме модерации используются Kafka и Cassandra, опыт работы с этими технологиями будет вашим преимуществом;
• В дальнейшем - способность самостоятельно подключать новые проекты к системе модерации, а также разработка общей схемы для ускорения подключения последующих проектов.