Cloudflare запустила ринок контенту для ШІ і власників сайтів
Інфраструктурна компанія Cloudflare представила новий сервіс Pay per Crawl, що дозволяє авторам контенту виставляти рахунки ШІ-сканерам за доступ до їхніх веб-сторінок.
Pay per crawl is a new feature to allow content creators to charge AI crawlers for access to their content. https://t.co/PUrlSs636k
— Cloudflare (@Cloudflare) July 1, 2025
В рамках експерименту власники веб-сайтів можуть контролювати доступ пошукових ШІ-ботів до свого ресурсу, а також встановлювати фіксовану плату за кожен обхід сторінки. Доступ до аналітики також може бути безкоштовним або повністю закритим.
Цей сервіс дозволяє визначити мету, з якою краулер відвідує сайт: для навчання ШІ-моделей, для відповіді на запити в ШІ-пошуковиках або для інших завдань.
Інтерфейс Pay per Crawl. Дані: Cloudflare
Cloudflare обслуговує понад 20% світового інтернет-трафіку, забезпечуючи захист і стабільність для веб-сайтів та веб-застосунків. Компанія позиціонує новий продукт як основу для нової бізнес-моделі в еру домінування ШІ.
Запуск Pay per Crawl відбувся на фоні зниження трафіку з Google Search і швидкого переходу користувачів до чат-ботів. Видавці шукають нові способи монетизації. Деякі з них, зокрема The New York Times, вже подали позови проти компаній, що займаються ШІ. Інші уклали угоди про ліцензування даних.
Cloudflare прагне створити довгострокову систему, в якій видавці самостійно визначають правила та ціни.
Нові сайти, які розгорнуті на платформі Cloudflare, автоматично блокуватимуть ШІ-ботів. Для надання доступу власники повинні вручну підтвердити дозвіл. Це, за словами компанії, забезпечить «контроль за замовчуванням» для кожного нового домену.
Щоб протестувати Pay per Crawl, як ШІ-компаніям, так і видавцям необхідно мати акаунт Cloudflare. У профілях обидві сторони можуть визначити прийнятні тарифи для купівлі та продажу контенту.
Попри спекуляції в індустрії, криптовалюти поки що не включені до нової системи. Хоча деякі експерти вважають, що саме цей клас активів найбільш підходить для таких фінансових розрахунків.
Нагадаємо, у червні суд у США визнав право Anthropic навчати ШІ-моделі на опублікованих книжках без отримання дозволу авторів.
