Загруженный сабмит модели автоматически не становится публичным. Как только вы поставите галочку “Опубликовать”, администраторам (и по совместительству экспертам, которые входят в экспертный совет бенчмарка) MERA придет оповещение на проверку сабмита. Как только они его одобрят (возможно с вами дополнительно свяжутся), вам придет оповещение на почту, и на лидерборде появится ваша модель. Если вы захотите обновить данный сабмит, процедура повторится. Пожалуйста, проверяйте свой сабмит перед отправкой и разрешением сделать его публичным.
Публичными могут стать сабмиты только со всеми представленными заданиями, которые имеют ссылку либо на модель, либо на статью, либо короткое описание модели. Кроме того, для справедливой оценки, мы просим авторов указывать все источники, параметры моделей и данные, которые они использовали при создании системы. Для того, чтобы экспертам удостовериться, что параметры были заданы фиксированные, для публичного сабмита необходимо будет предоставить лог прогона модели (он доступен в коде lm-harness после запуска).