PANews 9月16日消息，據Cloudflare網誌，其已向全部客戶開放「禁止AI訓練」設定，網站可在保留搜尋收錄的同時拒絕內容用於AI模型訓練，以解決搜尋與訓練由同一爬蟲承擔帶來的取捨難題。Cloudflare同時設立「負責任」爬蟲營運方認定，要求提供訓練退出機制與AI摘要退出選項、披露URL級收錄情況，並承諾退出訓練不影響搜尋排名，蘋果、谷歌、微軟、亞馬遜、Anthropic、Meta與OpenAI獲此認定。Cloudflare稱約17%的網站已啟用某種屏蔽訓練的機制，屏蔽搜尋爬蟲的則不足1%。