Интернет-гигант Cloudflare начнет блокировать ИИ-боты и не допускать их к контенту без разрешения владельцев сайтов. Это решение, которое может существенно повлиять на способность разработчиков ИИ обучать свои модели.
Отныне каждый клиент, регистрирующий новый веб-домен в Cloudflare, будет решать, хочет ли он разрешить работу ИИ-краулеров на своем сайте. Это даст владельцам ресурсов возможность предотвратить сбор данных ботами с их веб-сайтов.
В прошлом году Cloudflare запустила специальный инструмент, который дает издателям возможность блокировать ИИ-краулеров одним нажатием. Теперь компания идет дальше, делая это настройкой по умолчанию для всех веб-сайтов, которым она предоставляет услуги.
– ИИ-боты собирают контент без ограничений. Наша цель – вернуть власть в руки создателей, продолжая при этом помогать ИИ-компаниям внедрять инновации, – заявил генеральный директор Cloudflare Мэтью Принс. – Речь идет о защите будущего свободного и динамичного интернета с новой моделью, которая работает для всех
В то время как интернет ранее вознаграждал создателей контента, направляя пользователей на оригинальные веб-сайты, сегодня ИИ-боты нарушают эту модель, собирая тексты, статьи и изображения для генерации ответов на запросы таким образом, что пользователям не нужно посещать первоисточник.
Это решение представляет собой значительный сдвиг в отношениях между создателями контента и разработчиками ИИ. Cloudflare фактически ставит вопрос о том, кто контролирует данные в интернете и как они должны использоваться для обучения систем искусственного интеллекта.