지오이스트, AI·봇 무단 크롤링 막는 '비정상 크롤러 판별' 핵심 특허 취득

 

주식회사 지오이스트는 생성형 AI 확산으로 급증하는 무단 크롤링 및 봇 트래픽에 대응하기 위해, ‘비정상 크롤러를 판별하는 방법 및 장치’에 대한 국내 특허(등록번호 제 10-2926684호)를 취득했다고 밝혔습니다.

 

 이 특허는 웹사이트에 접속하는 트래픽 중에서 사람을 정교하게 흉내 내는 AI 크롤러와 악성 봇을 자동으로 판별하고, 가짜 페이지 제공과 트래픽 속도 제한(100Kbps 이하)을 통해 서버 부하와 데이터 유출을 동시에 막는 기술입니다.

지오이스트의 기술은 크게 네 단계로 비정상 크롤러를 가려냅니다.

 

 1차 필터링: 접속 초기의 헤더 정보, TLS 지문, robots.txt 요청 여부로 의심 트래픽 선별

행동 분석: GET 응답 간격, 초당 요청 수, 키보드·마우스 입력, 페이지 이동 속도 등 사람이 내기 어려운 패턴 탐지

고급 판별: 통계 모델과 클릭 좌표/시간 패턴으로 ‘사람다운 랜덤성’ vs ‘봇의 규칙성’ 구분

최종 대응: 비정상 크롤러를 가짜 페이지와 저속 QoS 구간에 격리

 

 이를 통해 단순 IP 차단 수준을 넘어, 정상처럼 보이는 AI·봇 크롤링까지 식별해 차단할 수 있어, 대규모 콘텐츠 서비스와 기업 웹사이트의 인프라 비용 절감과 데이터 자산 보호에 직접적인 도움을 줄 수 있습니다.

 

 지오이스트는 “웹 트래픽의 상당 부분이 더 이상 사람의 브라우저가 아닌 AI·봇에서 발생하는 시대”라며, “이번 비정상 크롤러 판별 특허는 이런 보이지 않는 AI 크롤링 트래픽으로부터 고객의 서비스와 데이터를 지키기 위한 지오이스트의 핵심 기술 자산”이라고 말했습니다.

 

 지오이스트는 향후 L7 프록시 기반 악성 봇 판별 특허 등 추가 기술과 결합해, AI 시대에 최적화된 웹 보안 솔루션을 지속적으로 선보일 계획입니다.