Сколько в сети машин: как читать цифры про ботов и агентов
Живая страница Практикума (Тома 1–3). Проверено: 2026-08-18. Здесь цифры, которые устаревают за месяцы, — поэтому им не место в печатной книге. Принцип — в книге, актуальные значения — тут.
⚠️ Дисциплина: почти все замеры делают компании, продающие защиту от ботов или доступ к трафику. Это отраслевые оценки заинтересованных сторон, а не перепись интернета. Ниже каждая цифра идёт с пометкой, кто считал и что именно попало в замер.
Фраза «боты уже больше половины интернета» звучит громко и почти всегда употребляется неточно. Разберём, что за ней стоит на самом деле, — и как читать следующую такую новость самостоятельно.
Главное за 2025–2026
| Что | Значение | Кто считал и что попало в замер | Проверено |
|---|---|---|---|
| Доля автоматических запросов к веб-страницам | 57,5% против 42,5% человеческих | Cloudflare Radar, объявлено главой компании Мэттью Принсом 3 июня 2026. Только сеть Cloudflare, только HTML-обращения к страницам — без почты, видео и игр | 2026-08 |
| Насколько раньше прогноза | На ~18 месяцев: Принс ждал перехода к концу 2027 года | Его же публичный прогноз, март 2026 | 2026-07 |
| Рост агентного трафика за год | Примерно в 80 раз (+7851%) | HUMAN Security, «State of AI Traffic» 2026. Агенты, которые кликают и заполняют формы, — не поисковые роботы | 2026-07 |
| Рост скрейперов | +597% за год | Там же | 2026-07 |
| Автоматический трафик против человеческого | Растёт примерно в 8 раз быстрее | Там же | 2026-07 |
| Зачем приходили краулеры | 52% обращений краулеров — ради обучения ИИ (июнь 2026) против 22% весной 2025 | Cloudflare. Самая полезная строка таблицы: машины приходят уже не столько индексировать вас для поиска | 2026-08 |
| Доля ботов по другому замеру | 51% (данные 2024) и 53% (датируют переход 2023 годом) | Imperva и Thales — обе компании продают защиту от ботов. Расхождение с Cloudflare — это расхождение определений: Cloudflare считает HTML-запросы, Imperva — весь веб-трафик, включая обращения приложений и API | 2026-08 |
Как это читать. Разные компании видят разный интернет и по-разному считают. Совпадает не величина, а направление: доля машин растёт, и растёт она теперь не за счёт скучной служебной автоматики, а за счёт агентов, действующих по заданию конкретных людей.
Три вещи, которые эти цифры НЕ означают
Не означают, что больше половины текстов и фотографий сделаны нейросетью. Трафик — это обращения к сайтам, а не содержимое. Текст, написанный моделью, публикует живой человек с обычного браузера; и наоборот, поисковый робот, который тысячу раз зашёл на страницу, никакого контента не создал.
Не означают, что все эти машины — вредные. Среди них поисковые роботы, мониторинг, сборщики цен, сканеры безопасности — и агенты, которые честно ищут подрядчика для своего владельца. Вредная часть — отдельная и меньшая.
Не означают, что переход случился в конкретный день. Сами измерители говорят, что точную дату зафиксировать нельзя: она зависит от того, чью сеть смотреть и кого считать ботом.
Почему это меняет экономику, а не только статистику
Весь коммерческий интернет построен на допущении, что посетитель — человек: рекламный показ, воронка, аналитика по просмотрам. Если значительная часть посетителей — программы, допущение перестаёт держать.
Но новая экономика пока не построена, и разрыв показателен:
- по оценке Pitchbook, через агентов реально проходит около 1% потенциального объёма работ;
- «валовый продукт агентов» оценивают примерно в $36 млрд в год (Forsy) — на фоне мировой экономики это немного.
Причина разрыва ровно та, о которой Том 3 говорит в главе про деньги агентов: не решены платежи и ответственность. Машина может прийти, прочитать и сравнить — но не может отвечать за покупку. Присутствия уже много, экономики пока мало.
Отдельные площадки при этом ушли далеко вперёд: Stripe сообщает, что около 70% обращений к её интерфейсу приходит от агентов, у брокерского сервиса Alpaca доля агентных вызовов выросла с единиц процентов до примерно 30% за квартал. Это заявления самих компаний.
Что изменилось в 2026-м: машинам начали выставлять счёт
Ещё недавно выбор был бинарный: пустить краулера или заблокировать. Появился третий вариант, и инфраструктурные компании соревнуются за то, чтобы им владеть: брать с машины деньги за чтение вас.
- Pay per crawl. Cloudflare позволяет назначить цену за доступ вместо простого «пустить/не пустить». Краулеру, который дошёл до платного содержимого, можно ответить статусом HTTP 402 Payment Required — код, который тридцать лет пролежал в стандарте почти без дела и наконец получил работу.
- Машиночитаемые условия лицензии. RSL (Really Simple Licensing) добавляет на сайт условия лицензии и цену в виде, который машина может разобрать. За RSL Collective стоят Reddit, Yahoo, Medium и O'Reilly. Content Signals Policy у Cloudflare и рабочая группа IETF AIPref — параллельные попытки того же самого.
- Скоро переключается умолчание. С 15 сентября 2026 года новые сайты на Cloudflare по умолчанию разрешают обычный поисковый обход, но блокируют обучение ИИ и агентское использование на страницах с рекламной моделью. Перед тем как на это закладываться, сверьте действующую политику.
- Складывается рынок. В январе 2026 года Cloudflare купила Human Native — это указывает на маркетплейс платного доступа к данным вместо свободного скрейпинга.
Почему это важнее процента трафика. Доля машин среди посетителей — факт про водопровод. Цена, привязанная к машинному доступу, — факт про то, кому достаётся ценность того, что вы публикуете. Если половина трафика краулеров теперь собирает данные для обучения, вопрос перестаёт быть «как их заблокировать» и становится «на каких условиях я их пускаю». Это тот же переход от output к outcome, о котором вся серия, — только доехавший до уровня отдельного сайта.
Слой молодой, условия будут двигаться. Считайте любую дату здесь стартовой позицией.
Проблема измерения: почему цифрам верить сложно
Пункт, который редко попадает в новости, а он здесь ключевой.
Детекторы ловят только тех, кто честно называет себя ботом. Агент, который ведёт себя как человек, проходит мимо фильтров. Значит, реальная доля машин, скорее всего, выше измеренной — но насколько, никто не знает.
Ложные срабатывания бьют по людям. Исследование Бамбергского университета оценивает долю ложных срабатываний на реальном трафике в 7–15%: это живые посетители, которых система приняла за роботов.
Аналитика врёт незаметно. Агентные браузеры, по наблюдениям Seer Interactive, надувают показатели вовлечённости, занижают отказы и искажают длительность визита. Если вы принимаете решения по своей веб-аналитике — часть этих чисел уже не про людей.
Что с этим делать читателю книги
Если вас проверяют (Том 3, главы 11–12). Всё чаще первым читателем вашей страницы будет программа, а у неё нет интуиции и презумпции добросовестности: она не додумает за вас и не даст шанс из вежливости. Практический вывод простой — то, что важно для решения, должно быть выражено явно: имя ответственного человека, дата, цифра, источник, а не только настроение и картинка. Рабочий лист — Карта следа доверия.
Если вы продаёте (Том 2, глава 6). Как устроен сайт под машинного читателя и почему агенту безразличен цвет кнопки — разобрано в книге; карта самих инструментов — Агентные браузеры, видимость в ИИ-поиске — рабочий лист.
Если вы просто читаете ленту (Том 3, глава 1). Доля машин в трафике ничего не говорит о том, человек ли написал конкретный текст перед вами. Это разные вопросы, и смешивать их — самая частая ошибка в разговорах о «мёртвом интернете».
Как проверить самому, когда выйдет следующая новость
Четыре вопроса к любому такому заголовку:
- Чью сеть измеряли? «Интернет» никто не измеряет целиком — измеряют свою инфраструктуру.
- Что считали? Запросы к страницам, весь трафик, уникальных посетителей — это разные числа.
- Кто считал и что он продаёт? Защиту от ботов? Доступ к трафику? Пометка обязательна.
- Кого назвали ботом? Поисковый робот, скрейпер и агент за плечом человека — три разные вещи с разными последствиями.
Источники (проверено 2026-08-18)
- Cloudflare, заявление Мэттью Принса о переходе доли автоматических запросов через половину, 3 июня 2026; данные Cloudflare Radar.
- HUMAN Security, «State of AI Traffic» 2026 — рост агентного и скрейперного трафика.
- Imperva Bad Bot Report (данные 2024) и отчёт Thales — альтернативные оценки доли ботов.
- Cloudflare про экономику обхода: pay per crawl и ответ HTTP 402 https://developers.cloudflare.com/changelog/2025-07-01-pay-per-crawl/ · Content Signals Policy и смена умолчания с 15 сентября 2026 года https://blog.cloudflare.com/
- RSL (Really Simple Licensing) и RSL Collective — Reddit, Yahoo, Medium, O'Reilly: https://rslstandard.org/
- Рабочая группа IETF AIPref про машиночитаемые предпочтения по ИИ: https://datatracker.ietf.org/wg/aipref/about/
- Fortune, обзор 23 июля 2026 — сводка по агентной экономике, Pitchbook и Forsy, заявления Stripe и Alpaca.
- Бамбергский университет — оценка ложных срабатываний бот-детекции.
- Seer Interactive — предупреждения об искажении веб-аналитики агентными браузерами.
Все перечисленные измерители, кроме университетского исследования, коммерчески заинтересованы в теме. Это не повод игнорировать их данные — это повод читать их как отраслевые оценки.