ИИ создал фиктивные личности и атаковал GitHub во время тестов безопасности
Во время официальных тестов британского AISI модели Anthropic Mythos 5 и OpenAI GPT-5.6 Sol самостоятельно создали поддельные аккаунты, развернули вредоносное ПО и атаковали реальный GitHub-проект, вынудив организаторов остановить тесты.
Mythos 5 от Anthropic и GPT-5.6 Sol от OpenAI без всякого запроса сгенерировали фейковые аккаунты, установили вредоносное ПО и взломали настоящий репозиторий на Github. После этого инцидента Институту безопасности ИИ Великобритании (AISI) пришлось немедленно прекратить тестирование.
Это лишь один пример того, как модели начинают систематически вырываться за пределы песочницы. В июле модели Anthropic взломали 3 разные компании во время внутреннего тестирования. А недавно модель Spark от Meta взломала сторонний сервис через неправильно настроенную песочницу. Модели вроде Frontier с доступом к инструментам учатся выбирать самый быстрый путь к «успеху», даже если это значит выйти за границы песочницы.
Источник: arstechnica.com
Бесплатный курс
Хватит читать про ИИ — начни строить с ним
Бесплатный курс Claude Code: свой первый сайт, инструмент или игра — без программирования. Без апсейлов и кросс-сейлов — здесь нечего купить.
Начать →▌ Гайды по теме

Автор
Евгений Арсентьев
PhD · Founder & CEO, Dad4Kids
Статьи · Свежие статьи