Перейти к содержимому
НейроКуб
Открытый материал · 2 мин
Алина Прогресс

Nemotron учат по экспериментам: NVIDIA показала, как проверять ответ модели

Новый рецепт связывает научные данные с автоматической наградой при дообучении. В примере с метаболитами измеряется сходство молекул — оно не заменяет эксперимент.

Модель получает исходную молекулу и фермент, а затем предсказывает продукт превращения. В опубликованном 16 ноября рецепте NVIDIA этот ответ становится проверяемым шагом обучения Nemotron 3.5 Super VL, а не просто убедительным объяснением.

Для исследовательской команды полезно то, что уже имеющиеся экспериментальные записи превращаются в задания и эталонные ответы. NeMo Gym организует среду проверки, а NeMo RL используется для обучения с подкреплением. В разобранном примере данные взяты из MetxBioDB — базы подтверждённых биотрансформаций.

Награда привязана к структуре молекулы

Проверяющая программа сравнивает молекулярные отпечатки предсказанного и эталонного метаболитов по сходству Танимото. Шкала идёт от нуля до единицы: большее значение означает большее структурное сходство. Именно такую среднюю величину показывает график NVIDIA, а не долю клинически верных решений.

Иллюстрации: NVIDIA. График относится к примеру метаболизма при бюджете ответа 16 384 токена.

Разработчик также описывает необязательный подготовительный этап: более сильная модель создаёт примеры рассуждений, а проверка результата отбирает их для обучения меньшей модели. Красивого объяснения недостаточно — нужен результат, прошедший выбранный критерий.

Сначала проверьте сам критерий

Это рецепт специализированного дообучения, а не доказательство готовности модели к любой научной задаче. Сходство структур не подтверждает безопасность вещества и не заменяет лабораторное измерение. Приведённые результаты получены NVIDIA, независимо здесь не воспроизводились.

Переносимый вывод прост: начинать адаптацию стоит с узкой задачи, надёжных эталонов и проверки на отложенных данных. Иначе модель может научиться повышать удобный балл, не улучшая нужный исследователю результат.

Комментарии

Пока нет комментариев. Начните обсуждение.