«Ловушка Google»: Почему сайты не могут запретить ИИ воровать контент, не потеряв поиск

Новость на нашем ресурсе об этом — https://protraffic.com/news/lovushka-google-pochemu-sajty-ne-mogut-zapretit-ii-vorovat-kontent-ne-poteryav-poisk-149302.html

Тема следующая: Cloudflare опубликовала ежегодный отчёт о состоянии интернета, где ключевой темой стал рост ИИ-трафика. В 2025 году боты для обучения моделей стали одной из самых активных категорий, а Google оказался вне конкуренции.

По данным Cloudflare, Googlebot сканирует 11,6% сайтов, обходя все остальные ИИ-краулеры вместе взятые. Проблема в том, что Google использует одного и того же бота и для поиска, и для обучения ИИ, поэтому издатели фактически не могут заблокировать его без риска потерять видимость в поиске.

При этом остальные ИИ-боты уже генерируют около 4% всех HTML-запросов, почти не возвращая трафик на сайты. В ответ всё больше ресурсов блокируют GPTBot и ClaudeBot, однако Google остаётся крупнейшим «читателем» интернета, от которого отказаться практически невозможно.

Вопросы такие (можно ответить на один или два — по вашему усмотрению)

Насколько критично для сайтов то, что Google использует одного бота и для поиска, и для обучения ИИ, и есть ли у издателей реальный выбор?

Можно ли технически ограничить использование контента для обучения ИИ, не теряя позиции в поиске, или это иллюзия?