Лучший способ определить googlebot

Какой самый надежный и быстрый способ идентифицировать искателя Googlebot? rDNS может быть подделан, поэтому список googlebot ip выглядит наиболее надежным способом. Существуют ли какие-либо сайты / ресурсы, где могут быть получены фактические googlebot ips? Любые другие идеи приветствуются.

    Если вы действительно хотите, чтобы IP был жестко закодирован (я бы не рекомендовал его, так как он может меняться в любое время и без уведомления), здесь есть список. То, что я рекомендовал бы (а также, что рекомендуется в блоге Goggle Webmaster ), заключается в том, что вы делаете обратный DNS, а затем пересылаете DNS, чтобы проверить это. Это всегда должно работать и не может быть подделано.

    Google bot использует следующие диапазоны –

    • 203.208.60.0/24,
    • 66.249.64.0/20,
    • 2001: 4860: 4801: 2: 6b00: 6006: 1300: b075,
    • 2001: 4860: 4801: 5: 1000: 6006: 1300: b075,
    • 2001: 4860: 4801: 6: e300: 6006: 1300: b075,
    • 2001: 4860: 4801: 2001 :: 6006: 1300: b075,
    • 2001: 4860: 4801: 2002 :: 6006: 1300: b075

    Больше информации здесь –

    http://myip.ms/info/bots/Google_Bing_Yahoo_Facebook_etc_Bot_IP_Addresses.html