Cloudflare меняет правила работы AI ботов для помощи владельцам сайтов

Почти 30 лет назад зародилась модель интернета, основанная на взаимовыгодном обмене: поисковые системы (прежде всего Google) получали разрешение индексировать контент, а взамен направляли трафик на сайты. Это позволяло авторам зарабатывать на рекламе, подписках или хотя бы получать признание. Но последние годы изменили все. Все больше людей ищут ответы в AI-инструментах, таких как ChatGPT, а не в Google.

Последний, в свою очередь, сам начал «отвечать» вместо перенаправления на сторонние ресурсы: сначала через Answer Box, а теперь через AI Overviews. В итоге, контент копируется больше, а трафика на источники меньше. И если раньше Google хоть как-то поддерживал баланс, то современные AI-модели, такие как OpenAI или Anthropic, практически не возвращают трафик авторам.

«Веб превратился в «сырьевой источник» для ИИ – без компенсации тем, кто этот контент создает».

Cloudflare меняет правила работы AI ботов для помощи владельцам сайтов - изображение 1

Cloudflare меняет правила игры

С 1 июля Cloudflare объявляет о начале новой эпохи в интернете. Отныне по умолчанию блокируются AI-боты, которые пытаются получить доступ к контенту без разрешения или компенсации. Вместе с ведущими издательствами, соцсетями (как Reddit и Pinterest) и AI-компаниями, Cloudflare устанавливает новые правила игры: искусственный интеллект должен платить за обучение на чужом контенте. Владельцы сайтов получают контроль: они могут разрешить или запретить индексацию, а также установить цену за доступ через модель «pay per crawl».

Cloudflare – мировой лидер в сфере кибербезопасности и оптимизации интернет-ресурсов, предлагающий защиту от DDoS-атак, управление ботами, оптимизацию трафика и создание глобальных корпоративных сетей. iIT Distribution – официальный дистрибьютор Cloudflare в Украине, занимается продвижением ее решений на рынке.

Новый интернет: меньше трафика – больше ценности

Cloudflare предлагает переосмыслить ценность контента. Вместо простой метрики трафика компания хочет ввести оценку по принципу «швейцарского сыра»: если ваш контент заполняет «дыры» в знаниях AI-моделей, он должен быть особенно ценным. Такой подход позволит поддержать создание оригинального и высококачественного контента, а не массового дублирования информации. Cloudflare уже работает с ведущими экономистами и учеными, чтобы создать рынок, где AI-компании смогут покупать именно тот контент, который им действительно нужен.

Новый шанс на изменение интернета

Традиционная модель интернета, а именно индексация в обмен на трафик, больше не работает. Cloudflare инициирует трансформацию: вместо исчерпания ресурса контента – вознаграждение авторам. Это не только шанс на новую экономику для издателей, но и возможность сделать ИИ более качественным и ответственным. И если все пойдет по плану, мы сможем увидеть новую золотую эпоху цифрового творчества на условиях справедливости и прозрачности.

НОВОСТИ