막아 놨는데 15%가 들어왔습니다 — 톨빗이 잰 AI 페처의 robots.txt 무시율 톨빗 상반기 실측에서 유럽 AI 페이지 페처의 약 15%가 차단된 주소에 접근했습니다. 챗GPT-유저·바이트스파이더·유봇은 자신을 막은 사이트의 절반에서 확인됐습니다. SVIL - Singularity Visual Intelligence Lab • 2026. 08. 16 • 19 min read