Крупные ИИ-компании ввели общий сигнал отказа от обучения

30 октября OpenAI заявила, что будет учитывать новый сигнал «policy token», который можно найти в файле robots.txt сайта — это обычный текстовый файл, который передаёт веб-роботам инструкции о том, что им можно делать, а что нельзя. Этот сигнал позволяет сайтам указывать своё отношение к использованию их контента для обучения ИИ-моделей в целом, вместо того чтобы прописывать политику для каждого бота отдельно. Идею впервые предложил Кевин Келли, инженер по стандартам в Anthropic (создателях языковых моделей Opus и Fable), в рамках рабочей группы Internet Engineering Task Force (IETF), которая разрабатывает открытые интернет-стандарты. По данным The Verge, OpenAI, Google, Microsoft и Anthropic обязались учитывать этот сигнал.

Это изменение немного облегчает жизнь тем, кто публикует контент онлайн. Вместо того чтобы прописывать политику для каждого бота отдельно, теперь можно использовать один сигнал. Однако, поскольку это необязательно и у этих компаний нет никаких юридических обязательств это соблюдать, это стоит ровно столько, сколько стоит обещание крупной корпорации.