구글 크롤링봇 (googlebot)의 IP

현재 일반적으로 알려져 있는 구글봇의 아이피 목록은 다음과 같습니다.

  • 64.68.90.1 ~ 64.68.90.255
  • 64.233.173.193 ~ 64.233.173.255
  • 66.249.64.1 ~ 66.249.79.255
  • 216.239.33.96 ~ 216.239.59.128

물론 이것은 구글 공식 자료는 아닙니다. 구글은 크롤러의 IP를 알려주지 않고, host 명령으로 확인하라고만 하고 있습니다.

우리나라 웹사이트는 저중에서 66.249.69.44 같은 66.249번대 IP의 크롤러가 많이 활동한다고 합니다.

그런데 저 외에 211.39.150.194 와 211.39.150.195 도 구글 크롤러로 의심됩니다.

host 명령에는 googlebot으로 나오지 않지만, 의심을 하는 이유가 저 IP의 크롤러가 상당히 많이 사이트를 읽는데, 그렇다고 차단을 하면 구글 웹마스터 도구Fetch as Google tool 에서 오류를 내기 때문입니다. 정식 크롤러는 아니고 웹마스터도구용 크롤러인지도 모르죠. 아이피 영역을 보면 구글 코리아에서만 운영하는지도 모르고요. 어째튼 구글과 연관된 것으로 충분히 의심되는 IP입니다.

웹서버를 운영하시는 분들은 참고하시길 바랍니다.

ps. 회사 사이트의 서버를 호스팅하는 업체가 확인도 안하고 트래픽이 심하다는 이유로 마구잡이로 차단을 걸어서 방문자가 급감함. -_-

글쓴이 : Draco (https://draco.pe.kr)
크리에이티브 커먼즈 라이선스 이 저작물은 크리에이티브 커먼즈 저작자표시 4.0 국제 라이선스에 따라 이용할 수 있습니다.

You may also like...

댓글 남기기

This site uses Akismet to reduce spam. Learn how your comment data is processed.