NVIDIA представи Nemotron for Science на 16 ноември: научни приложения на Nemotron 3.5 Super VL, данни и рецепти за последващо обучение на специализирани агенти. Новият повод е научният пакет и Litmus-Bench v0.2, а не повторна премиера на вече познатия основен модел.

Фирменото съобщение поставя акцент върху химията и работата със специализирани изчислителни инструменти. Това е изследователска инфраструктура. Представянето не означава доказано лечение, одобрено лекарство или универсално автономна лаборатория.

Какво съдържа провереният артефакт

Картата на Litmus-Bench v0.2 посочва 47 118 тренировъчни въпроса и 2056 тестови въпроса с кратки отговори. Описани са произходът на данните и употребата им за химично разсъждение и обучение с проверими награди. Публичната страница и README са налични; не сме изтегляли и изпълнявали целия набор.

Сред източниците са ChEMBL, ExpansionRx и Biogen, а някои задачи използват дескриптори от RDKit. Картата показва и различни лицензни обозначения. Затова „отворен набор“ не освобождава използващия екип от проверка на условията и произхода на конкретните записи.

NVIDIA свързва пакета с дообучение на модели и с научни агенти, които извикват външни инструменти. Съобщените приложни резултати са твърдения на компанията и партньорите ѝ. Тук не ги превръщаме в независимо възпроизведени клинични или лабораторни постижения.

Защо разделянето на данните е решаващо

Нашият редакционен извод е, че достъпът до тренировъчни и тестови задачи в един пакет създава полезна възможност и ясна отговорност. Ако екип обучава върху въпросите, с които след това измерва успеха, високият резултат може да показва запомняне. Необходимо е да се документира кое влиза в обучението и кое остава извън него.

За собствено изпитание бихме отделили предварително нови молекули или задачи и бихме запазили неизменни версиите на проверяващите инструменти. Това е предложен контрол, не описание на проведен от SIExpo експеримент. Важно е и да се разграничат правилният числен отговор, правилното използване на инструмент и убедителното словесно обяснение.

Например агент може да стигне до вярна стойност чрез външен калкулатор, но да обясни неправилно химичния смисъл. Обратното също е възможно: смислено обяснение с грешно изчисление. Научната употреба изисква тези грешки да се виждат отделно.

Стойността на новия пакет е в по-достъпната основа за такива проверими процеси. Следващият убедителен резултат би включвал описани данни, ясни критерии и независима проверка на изпълнението. Достъпните модели и набори улесняват тази работа; не заменят самото научно доказателство.