01 Jul 2025, 23:22
Cloudflare запускає систему оплати та блокує AI-ботів для захисту контенту
- Система Pay Per Crawl дозволяє власникам сайтів встановлювати умови доступу та отримувати оплату від AI-ботів.
- Нові сайти на Cloudflare автоматично блокують AI-краулери без спеціального дозволу власника.
- Зміни стали реакцією на масові скарги видавців щодо неконтрольованого збору та використання контенту AI-компаніями.
Про це повідомляють Mezha, ZDNet.
1 липня 2025 року компанія Cloudflare впровадила нову політику, яка обмежує доступ до контенту для штучного інтелекту (AI) без дозволу та компенсації власникам сайтів. Тепер AI-боти, такі як GPTBot від OpenAI та ClaudeBot від Anthropic, автоматично блокуються на всіх нових сайтах, які використовують послуги Cloudflare, якщо власник не надасть спеціальний дозвіл.
Cloudflare також представила систему Pay Per Crawl, що дозволяє власникам сайтів отримувати оплату за надання доступу AI-краулерам до свого контенту. Власники можуть встановлювати фіксовану ціну за запит або обирати між дозволом, оплатою чи повним блокуванням доступу для ботів. Для реалізації цієї системи використовується HTTP-код 402 "Payment Required", який раніше майже не застосовувався у веб-інфраструктурі.
Дані нововведення стали відповіддю на зростання кількості скарг від видавців та правовласників щодо неконтрольованого використання їхнього контенту AI-компаніями без згоди та виплат. Тепер AI-компанії вимушені домовлятися про умови доступу або оплачувати використання даних для навчання своїх моделей.
Теги: Технології/ШІ