최근 발표에 따르면, Cloudflare가 2026년 9월 15일부터 검색 인덱싱과 AI 학습 데이터를 동시에 수집하는 크롤러를 차단하는 정책을 강화할 예정입니다. 이로 인해 구글과 Bing의 크롤러가 AI 학습 및 검색 인덱스 작업을 동시에 수행하는 경우, 차단 대상이 될 가능성이 높아지고 있습니다. 특히, 기존에 AI 차단 기능을 활성화한 사이트들은 구...
PREMIUM Cloudflare, AI 크롤링 차단 정책 강화로 검색 인덱스 영향
