구글봇을 사칭한 외부 봇들이 사이트 장애를 일으키고 있다.
많은 사이트에서 발생하는 장애는 실제 Googlebot이 아니라 Googlebot을 사칭한 외부 봇들로 인해 발생하고 있다. 이는 HTTP User-Agent로 요청자가 임의로 문자열을 조작할 수 있어, 로그에서 'Googlebot/2.1'을 확인한다고 해서 진짜 Googlebot임을 보장할 수 없다는 점에서 위험하다.
Many site issues stem from bots impersonating Googlebot, not the real Googlebot.
Many website issues arise not from the actual Googlebot, but from external bots impersonating Googlebot. This is concerning as the HTTP User-Agent can be arbitrarily manipulated by requesters, meaning that seeing 'Googlebot/2.1' in logs does not guarantee it is the real Googlebot.