Крупные издатели рассматривают ограничение доступа Google к контенту на фоне падения поискового трафика
ЕРЕВАН, 23 июля. /АРКА/. Крупные международные издатели и онлайн-платформы пересматривают отношения с Google на фоне сокращения поискового трафика и расширения AI-функций компании, которые позволяют пользователям получать ответы непосредственно в поисковой выдаче без перехода на сайты первоисточников.
Как сообщает The Wall Street Journal, возможность ограничить взаимодействие с Google в той или иной форме рассматривают USA Today, Politico, Reuters, The Economist, People Inc. и Reddit. При этом речь идет о разных сценариях — от ограничения доступа отдельных роботов Google и отказа от участия в AI-функциях до, в отдельных случаях, возможной полной блокировки поискового crawler компании.
По данным издания, одна из ключевых претензий издателей связана с устройством доступа Google к их сайтам. Владельцы ресурсов могут запретить использование контента для обучения AI-моделей Google, однако традиционная поисковая индексация и использование материалов для ответов в AI-поиске пока тесно связаны. Если издатель хочет присутствовать и в традиционной выдаче, и в AI-результатах Google, он должен разрешать соответствующий обход сайта.
Издатели добиваются возможности отдельно разрешать классическую поисковую индексацию и отдельно решать, может ли их контент использоваться в AI-функциях.
Проблема стала особенно чувствительной на фоне сокращения поискового трафика.
Согласно скорректированным данным Semrush, приведенным The Wall Street Journal, органический трафик из Google от пользователей США на национальный сайт USA Today в июне 2026 года был на 18% ниже, чем годом ранее. У Politico снижение составило 20%, у CNN и Business Insider — по 31%.
При расчете скользящего среднего за 12 месяцев, согласно данным Semrush, приведенным The Wall Street Journal, трафик из Google сократился примерно на 35% у Reuters, на 44% у The Washington Post, на 43% у Business Insider, на 28% у USA Today, на 27% у Time и на 18% у The Wall Street Journal. В то же время The Guardian показала рост примерно на 16%, BBC — около 15%.
USA Today Co., владеющая одноименной национальной газетой и сотнями региональных изданий, рассматривает возможность полностью закрыть доступ поисковому роботу Google, если сокращение поискового трафика продолжится.
Генеральный директор USA Today Co. Майк Рид сообщил The Wall Street Journal, что компания уже готовится к сценарию, при котором не будет получать доходы от аудитории, приходящей через Google. USA Today также ведет антимонопольный судебный процесс против Google в сфере рекламных технологий.
Reuters рассматривает возможность блокировки робота Google для своего открытого новостного продукта. Президент Reuters Пол Баскоберт сообщил The Wall Street Journal, что компания оценивает экономический баланс между преимуществами поискового трафика и эффектом AI-резюме.
В Politico обсуждались варианты ограничения доступа Google и других роботов к бесплатным публикациям, в том числе посредством обязательной регистрации пользователей.
The Economist после решения британского регулятора обсуждает возможность отказаться от участия в AI-поиске Google. При этом полный выход из Google издание сейчас не рассматривает. Представитель The Economist отметил, что, несмотря на нестабильность и сокращение поискового трафика, он по-прежнему имеет ценность для издателя.
Отдельная ситуация складывается вокруг Reddit. В 2024 году компания заключила с Google соглашение примерно на $60 млн в год, позволяющее использовать материалы платформы для обучения AI-моделей. Сейчас, по данным The Wall Street Journal, Reddit и Google обсуждают возможное продление заканчивающегося соглашения, в то время как руководство Reddit оценивает выгоды дальнейшего предоставления своего контента Google.
People Inc., в портфель которой входят People, Better Homes & Gardens и Travel + Leisure, также рассматривает возможность полной блокировки Google. При этом компания пока продолжает разрешать Google обход своих сайтов. Доля Google в трафике People Inc. в первом квартале 2026 года составила около 25% против более половины два года назад.
Дополнительным фактором стала возросшая активность автоматических роботов. По данным Cloudflare, автоматизированные агенты и боты обеспечивают более половины веб-запросов. Они используются, в частности, для поисковой индексации, работы AI-сервисов, обучения моделей и сбора контента.
С 15 сентября 2026 года Cloudflare изменит настройки управления автоматическими роботами. Для новых доменов роботы категорий Training и Agent будут по умолчанию блокироваться на страницах с рекламой, тогда как поисковые роботы категории Search останутся разрешенными. Многоцелевые роботы, совмещающие поисковую индексацию и обучение AI, будут подпадать под наиболее строгое из установленных владельцем сайта ограничений.
Изменения происходят и в регулировании использования издательского контента AI-системами. 3 июня британское Competition and Markets Authority (CMA) ввело обязательные требования для Google, предусматривающие, в частности, предоставление издателям эффективных инструментов контроля за использованием их контента в генеративных AI-функциях поиска.
CMA предоставило Google до девяти месяцев на полное выполнение требований, при этом регулятор ожидает внедрения ключевых инструментов раньше этого срока.
По данным The Wall Street Journal, Google планирует тестировать соответствующие инструменты в Великобритании перед их дальнейшим внедрением для владельцев сайтов в других странах. В частности, речь идет о возможности для издателей отказаться от использования их контента в AI-функциях Google без потери присутствия в традиционных результатах поиска. Конкретные сроки глобального внедрения механизма не объявлены.
Google, в свою очередь, заявляет, что его AI-функции в поиске еженедельно направляют на внешние сайты миллиарды переходов. Глава Alphabet Сундар Пичаи в июле сообщил, что AI-функции Google Search обеспечивают внешним сайтам миллиарды кликов в неделю. Компания также утверждает, что ссылки, включенные в AI-ответы, помогают издателям и создателям контента расширять аудиторию.
По данным The Wall Street Journal, Google также запустила программу, в рамках которой более 200 издателей получают оплату за предоставление контента для использования в AI-продуктах компании.
Параллельно отдельные издатели экспериментируют с новыми способами взаимодействия с AI-системами. По данным The Wall Street Journal, Time тестирует текстовые рекламные материалы, ориентированные на автоматические системы. Предполагается, что содержащаяся в них информация потенциально может учитываться AI-сервисами при формировании ответов.