Cloudflare даёт владельцам сайтов контроль над ИИ-ботами на 20% интернета
Cloudflare анонсировала новую функцию контроля над ИИ-ботами. Она делит ботов на поисковых, агентских и обучающих. С 15 сентября 2026 года обучающие боты будут по умолчанию заблокированы для 20% интернета.
Cloudflare, через которую проходят запросы более чем к 20% сайтов в мире, анонсировала новую систему контроля над ИИ-ботами. Впервые они вводят тонкую настройку для ботов, включая поисковых ботов, агентских ботов (которые действуют от имени пользователя) и обучающих ботов (которые собирают данные для обучения ИИ-моделей). Раньше можно было либо разрешить всех ботов, либо заблокировать всех.
Новые правила с 15 сентября 2026
С 15 сентября 2026 года Cloudflare начнёт по умолчанию блокировать обучающих и агентских ботов на сайтах с рекламой, но разрешать поисковых ботов. Функция доступна всем пользователям, а не только на тарифе Enterprise. Есть также функция под названием BotBase для пользователей Enterprise, которая даёт доступ к базе данных всех известных ботов.
Прозрачность как условие доступа
Их планы включают присвоение разработчикам ботов статуса Verified. Чтобы получить его, они должны соблюдать строгие стандарты поведения и требования по раскрытию информации. Если они потеряют этот статус, их заблокируют более чем на 20% доменов интернета — это делает политику Cloudflare ключевой опорой для всей индустрии. Это первое структурное препятствие, с которым столкнулись разработчики ИИ, годами тихо собиравшие данные.
Источник: blog.cloudflare.com
Бесплатный курс
Хватит читать про ИИ — начни строить с ним
Бесплатный курс Claude Code: свой первый сайт, инструмент или игра — без программирования. Без апсейлов и кросс-сейлов — здесь нечего купить.
Начать →▌ Гайды по теме
Автор
Евгений Арсентьев
PhD · CEO, digital health
Статьи · Свежие статьи