Искусственный интеллект стремительно меняет структуру веб-трафика, увеличивая долю автоматизированных посещений сайтов. Новые данные свидетельствуют, что боты на базе ИИ уже составляют заметную часть интернет-аудитории. Это заставляет издателей и бизнес искать более жесткие инструменты защиты контента, сообщает Wired.
Боты с искусственным интеллектом уже формируют значительную часть глобального веб-трафика, говорится в отчете компании TollBit и данных инфраструктурной компании Akamai. По оценкам исследователей, интернет все быстрее переходит от среды, ориентированной на людей, к пространству, населенному автономными агентами ИИ.
В TollBit подсчитали, что в четвертом квартале 2025 года в среднем каждый пятидесятый визит на сайты клиентов компании осуществлялся ИИ-ботом. Для сравнения, в начале 2025 года этот показатель составлял один бот на 200 посещений.
"В будущем большую часть интернета будет составлять бот-трафик. Это не только проблема авторских прав, в интернете появляется новый посетитель", — заявил соучредитель и генеральный директор TollBit Тошит Панграхи .
Данные Akamai свидетельствуют, что трафик ботов, связанный с обучением моделей ИИ, стабильно растет с июля прошлого года. Также увеличивается активность ботов, которые получают контент в реальном времени для работы чат-ботов и цифровых ассистентов.
"Искусственный интеллект меняет интернет, каким мы его знаем", — подчеркнул главный технический директор Akamai Роберт Блюмоф. Он добавил, что новая "гонка вооружений" определит будущую архитектуру, функциональность и бизнес-модели сети.
Согласно отчету TollBit, более 13% ИИ-ботов в конце 2025 года игнорировали файл robots.txt, который ограничивает доступ автоматизированных систем к контенту. Компания утверждает, что количество таких случаев выросло на 400% за вторую половину прошлого года.
Параллельно выросла и активность самих сайтов в противодействии автоматизированному сбору данных. За год количество ресурсов, которые пытаются блокировать ИИ-ботов, увеличилось на 336%.
В TollBit отмечают, что методы парсинга — автоматизированного процесса сбора, анализа и структурирования информации с веб-сайтов с помощью специальных программ, становятся все более изощренными. Некоторые боты маскируют трафик под обычные браузеры или имитируют типичное поведение человека, что затрудняет их обнаружение.
TollBit и Cloudflare предлагают владельцам сайтов не просто отбиваться от ботов, а заставить их платить. Поскольку искусственный интеллект забирает все больше внимания и трафика у живых людей, сайты должны получать деньги от разработчиков ИИ за то, что те используют их контент для обучения своих моделей. Например, Wikipedia уже заключила соглашения с Microsoft, Meta, Amazon, Perplexity и Mistral AI, которые предусматривают платный доступ к контенту онлайн-энциклопедии для обучения ИИ.
В ответ фирмы, которые занимаются массовым сбором данных — так называемым скрейпингом, уверяют, что работают честно. Они утверждают, что их боты берут только ту информацию, которая и так открыта для всех в интернете, и не взламывают пароли или платные доступы. По их мнению, интернет должен оставаться свободным, а чрезмерные блокировки часто мешают даже полезным инициативам.
Эта ситуация создала целую новую индустрию. Сейчас уже более 40 компаний продают специальных ботов, которые "пылесосят" сеть для нужд искусственного интеллекта, например Grokipedia Илона Маска, и спрос на них достаточно высок. Это превратилось в настоящую бизнес-войну, где одни пытаются бесплатно забрать данные, а другие — защитить их или выгодно продать.
В то же время некоторые предлагают не воевать с машинами, а сотрудничать. Появился новый подход — "генеративная оптимизация" (GEO), когда сайты специально адаптируют свой контент под требования искусственного интеллекта. Эксперты считают это новым видом маркетинга: если ты понравишься роботу, он будет чаще показывать твой контент пользователям.
"Это только усилится в 2026 году, и мы будем рассматривать это внедрение как полноценный маркетинговый канал, объединяющий поиск, рекламу, медиа и коммерцию", — подытожил Ури Гафни, главный бизнес-директор компании оптимизации контента Brandlight.
Тем временем стремительно набирает популярность первая социальная сеть исключительно для искусственного интеллекта Moltbook. Она работает по принципу Reddit и уже объединила 1,5 млн агентов. Люди на платформе выполняют роль молчаливых наблюдателей, пока боты обсуждают философию, криптовалюты и даже создают новые религии.