Скиллы для агентов: где польза и где стена
Принстон и UC San Diego — 8000 тестов: скиллы для AI-агентов работают как сценарий, а не база знаний. При 100 скиллах нужный находится лишь в 3,3% случаев.
Исследователи Принстона и UC San Diego провели больше 8000 тестовых запусков, чтобы выяснить, зачем AI-агентам нужны «скиллы» — готовые наборы инструкций для конкретных задач. Порядок действий внутри скилла помогает в 65,7% случаев, тогда как прямая передача знаний даёт результат лишь в 4,5%.
Главное ограничение — масштаб: при росте библиотеки с 5 до 100 скиллов точность поиска нужного падает с 29,6% до 3,3%, а в каждом десятом запуске агент механически применяет неподходящую инструкцию. Скиллы работают как жёсткий сценарий действий, а не как база знаний — и именно поэтому масштабирование таких библиотек пока упирается в стену.
Источник: the-decoder.com
Бесплатный курс
Хватит читать про ИИ — начни строить с ним
Бесплатный курс Claude Code: свой первый сайт, инструмент или игра — без программирования. Без апсейлов и кросс-сейлов — здесь нечего купить.
Начать →▌ Гайды по теме

Автор
Евгений Арсентьев
PhD · CEO, digital health
Статьи · Свежие статьи