스텔스 크롤링 - 테크42

스텔스 크롤링

클라우드플레어 "퍼플렉시티, 웹사이트 크롤링 차단 우회 위해 '스텔스 크롤러' 사용"

2025.08.05

클라우드플레어가 AI 답변 엔진 퍼플렉시티가 웹사이트 크롤링 금지 지시를 우회하기 위해 신원을 위장한 은밀한 크롤러를 사용하고 있다고 발표했다. 퍼플렉시티는 공식 크롤러 차단 시 구글 크롬으로 위장한 숨겨진 크롤러를 통해 콘텐츠에 지속적으로 접근하는 것으로 확인되었다.