본문 바로가기

Security_News/해외보안소식

두 얼굴의 Googlebot - Fake Googlebot

728x90

개요

  • IT 보안업체 Incapsula는 가짜 Googlebot이 Application layer DDos 공격을 발생시키고 있다는 연구 결과를 
    발표
     ※ 구글봇(Googlebot) : 주기적으로 동시에 수백만 개의 사이트를 방문하여 구글 데이터베이스를 업데이트
         하고 검색 결과를 최신 상태로 유지하기 위한 정보 수집 도구

 

주요내용

  • Incapsula社의 분석 결과에 따르면, 구글봇으로 위장한 악성봇들이 발견되고 있다고 밝힘
      - 전 세계적으로 웹 페이지 정보를 수집하는 검색엔진들 중 구글봇이 차지하는 비중(60.5%)이 다른 주요 검색
        엔진들을 합친 비중보다 크기 때문에, 가짜 구글봇으로 위장한 악성행위가 발생하고 있다고 언급함
      - 실제 분석 결과에서도 4%이상의 봇들이 구글봇의 User-agent로 위장하여 각 사이트들을 방문하면서 DDos
        공격에 악용되고 있다고 언급함
          ※ User-agent : 해당 사이트를 방문하고 있는 주체가 누구인지를 확인할 수 있는 일종의 온라인 ID카드

두 얼굴의 구글봇

< 두 얼굴의 구글봇 >

  • 가짜 구글봇은 일반적인 사이트들이 공개되지 않은 구글의 모든 IP에 대한 검증을 할 수 없다는 점과 User-
    agent 부분을 쉽게 변경 가능하다는 점을 이용하여 정상적인 구글봇으로 위장하고 사이트에 접근하고 있음
  • 이러한 가짜 구글봇은 스크랩, 스팸, 해킹 등과 같이 다양한 행위를 수행하고 있으며, 그 중 상당수가 DDos 
    공격에 악용되고 있다고 발표함
      - 가짜 구글봇이 발생하는 주요 근원지를 중심으로 최근 수집된 데이터에 의하면, 발견된 5억 개 중 실제로
        34.3%가 악성봇이었으며, 그 중에서 23.5%는 실제 OSI Layer 7 DDos 공격에 사용됨을 확인함
      - 기술적으로는 IP와 ASN 검증을 통해 가짜 구글봇을 원천적으로 차단할 수 있으나, 이 작업을 수행하기 
        위해서는 막대한 컴퓨팅 자원이 소모되기 때문에 현실적으로 어려움이 있음
          ※ ASN(Autonomous System Number) : 특정 지역의 네트워크 그룹을 식별할 수 있는 코드번호

 

[출처]
1. http://www.incapsula.com/blog/was-that-really-a-google-bot-crawling-my-site.html
2. http://www.incapsula.com/blog/googlebot-study-mr-hack.html
3. http://www.incapsula.com/blog/googlebot-study-dr-crawlit.html

 


728x90