📰 IT Дайджест

#crawling

1 материал

2. Cloudflare научился блокировать AI-тренировку, не трогая поисковую индексацию

Cloudflare запустил настройку Disallow AI Training, которая позволяет запретить использование контента для обучения ИИ, не блокируя поисковых ботов. Apple, Google и Microsoft обязались соблюдать этот параметр. 17% сайтов уже блокируют тренировку, но менее 1% — поисковых ботов.

blog.cloudflare.com · #ai #ai #cloudflare #crawling #web