Runway открыла код модели Praxis-1 для управления роботами
Runway открыла код модели Praxis-1, которая превращает понимание видео в команды для роботов и лидирует в категории RoboLab-120.
Runway — компания, известная генерацией видео с помощью ИИ. Она открыла код и веса Praxis-1, модели, которая превращает понимание видео в команды для робота. Сначала Runway дала доступ только отдельным партнёрам в конце сентября. Теперь модель доступна всем под лицензией Apache 2.0 — лицензией, которая разрешает свободное коммерческое использование.
В тесте Nvidia RoboLab-120, проверке на 120 задачах для роботов, Praxis-1 лидирует в категории моделей, которые выполняют действия на основе видео. Она показала долю успеха 46,2%, против 42,9% у конкурирующей модели FLUX 3 Action. На роборуке Franka Praxis-1 успешно справилась с 88 попытками из 100. У конкурента вышло только 80. На незнакомой мобильной роботплатформе, после дополнительного обучения на 95 часах данных, она добивалась успеха в 80% случаев.
Сама Runway признаёт, что модель путает похожие друг на друга объекты. Также она не способна сама планировать сложные последовательности действий. Каждый шаг в более длинной задаче всё ещё нужно прописывать вручную. И среди всех типов робот-моделей в RoboLab-120, не только тех, что работают на основе видео, Praxis-1 занимает лишь пятое место в общем зачёте.
Источник: the-decoder.com
Бесплатный курс
Хватит читать про ИИ — начни строить с ним
Бесплатный курс Claude Code: свой первый сайт, инструмент или игра — без программирования. Без апсейлов и кросс-сейлов — здесь нечего купить.
Начать →▌ Гайды по теме

Автор
Евгений Арсентьев
PhD · Founder & CEO, Dad4Kids
Статьи · Свежие статьи