클라우드플레어는 검색용 크롤러와 AI 학습/에이전트용 크롤러를 분리하여 콘텐츠 통제권을 강화합니다. 클라우드플레어는 9월 15일부터 광고 페이지에서 혼합 용도 크롤러를 기본 차단한다고 발표했습니다. 이는 콘텐츠 대가 정당성에 관한 문제와 관련이 있습니다.