Открытая модель Ripple-65B обновила рекорд среди моделей из США

Ricursive Intelligence — компания, которая раньше проектировала чипы для искусственного интеллекта, — выпустила открытую языковую модель Ripple-65B Preview. У неё 65 миллиардов параметров — это показатель размера модели. Её обучили на 12 триллионах токенов — это текст, на котором модель учат. В TerminalBench 2.1 — тесте на то, как модель справляется с задачами по написанию кода из командной строки, — она набрала 80,52 балла. По словам компании, это лучший результат среди моделей с открытыми весами, созданных в США. Разработка и обучение вместе стоили 32 миллиона долларов, сообщает Ricursive.

В других тестах Ripple-65B Preview отстаёт. В SWE-Bench Pro v2.0 Hard — тесте на исправление реальных багов в софте — она набрала 79,1%. Конкурирующая открытая модель Inkling 2 Small от Thinking Machines набрала в том же тесте 86,3%. Ripple-65B Preview также использует более простую архитектуру, чем многие конкуренты: одну плотную сеть, а не систему mixture-of-experts, которая распределяет работу между мелкими специализированными частями. Такая архитектура заточена под чипы Nvidia и может быть проще в запуске на собственном оборудовании компании вместо облачного сервиса. Для компаний, которым это важнее, чем первое место в рейтинге, цена и простота запуска могут значить больше, чем позиция в таблице. Модель выложена на Hugging Face, онлайн-библиотеке моделей ИИ, под лицензией Apache 2.0, которая разрешает свободное использование и изменение.