Cloudflare CEO: боти перевершили людей, і вебу потрібна нова бізнес-модель

Співзасновник і CEO Cloudflare Меттью Прінс заявив у подкасті Decoder від The Verge, що цього року автоматичний трафік перевищив людський, а рекламна модель, яка фінансувала веб три десятиліття, більше не витримує. В інтерв’ю з Нілаєм Пателем він розповів, як компанія планує змусити AI-краулерів платити.

Боти перевершили людей

За словами Прінса, дані Cloudflare показали, що автоматичний трафік перевищив людський у травні, а компанія оголосила про це в червні. У листопаді на Web Summit він очікував цього в другій половині 2027 року, у березні на South by Southwest скоротив строк до першої половини 2027-го. «Я був приголомшений», сказав він. Якщо тенденція збережеться, за п’ять років автоматичний трафік у 1000 разів перевищить людський, який залишиться приблизно на тому ж рівні. Прінс визнає, що досі помилявся в кожному прогнозі на цю тему. За даними Cloudflare Radar, опублікованими в червні, на ботів припадає 57,4% HTTP-запитів у світі, на людей 42,6%.

Pay to crawl

Реклама не може оплатити це зростання, адже боти не натискають на банери. Прінс описав проблему як трагедію спільних ресурсів: AI-агент, який шукає, де пообідати, переглядає все меню в районі, а замовлення отримує лише один ресторан. Cloudflare повертає на веб мікроплатежі: один перегляд сторінки може коштувати тисячну частку цента, а на новини чи наукові праці буде вища ціна. Разом із Coinbase та Stripe компанія відроджує протокол HTTP 402 «потрібна оплата». Гроші надходитимуть із того, що користувачі платять за AI-сервіси, приблизно так, як Spotify збирає підписки: торік Spotify повернув музичній індустрії близько 12 мільярдів доларів, а данський автор пісень заробляє 40 мільйонів євро на рік, пишучи пісні на запити, на які Spotify не має відповіді.

«Google Zero» і правила від 15 вересня

З 15 вересня Cloudflare має намір змінити налаштування за замовчуванням для всіх безплатних клієнтів так, щоб AI-краулер Google блокувався; якщо Google не розділить навчання AI і пошукову індексацію, його блокуватимуть повністю, а власники сайтів зможуть це вимкнути. Прінс називає такий сценарій «Google Zero» і наполягає, що Google не повинен перетворювати вчорашню пошукову монополію на завтрашню AI-монополію. Після рішення у Великій Британії, за його словами, Google погодився на більшу прозорість краулера. Він зазначає, що контент Reddit продається щонайменше в сім разів дорожче за токен, ніж матеріали The New York Times, бо не має заміни, і що його власна газета Park Record у Парк-Сіті цього року заробить на AI-ліцензуванні більше, ніж на цифровій рекламі.

Зміни всередині Cloudflare

AI змінює і саму Cloudflare. У травні компанія скоротила 1100 людей, близько 20% персоналу; Прінс пояснив це рішення в колонці для Wall Street Journal. Більшість скорочень припала на функції вимірювання за моделлю Пітера Друкера «будівельники, продавці, вимірювачі»: документи для інвесторів, над якими 20 людей працювали два тижні, тепер готуються за три хвилини. Компанія з 4500-5000 співробітників і далі наймає будівельників і продавців та спрощує управління.