Какой самый надежный и быстрый способ идентифицировать искателя Googlebot? rDNS может быть подделан, поэтому список googlebot ip выглядит наиболее надежным способом. Существуют ли какие-либо сайты / ресурсы, где могут быть получены фактические googlebot ips? Любые другие идеи приветствуются.
Если вы действительно хотите, чтобы IP был жестко закодирован (я бы не рекомендовал его, так как он может меняться в любое время и без уведомления), здесь есть список. То, что я рекомендовал бы (а также, что рекомендуется в блоге Goggle Webmaster ), заключается в том, что вы делаете обратный DNS, а затем пересылаете DNS, чтобы проверить это. Это всегда должно работать и не может быть подделано.
Google bot использует следующие диапазоны –
Больше информации здесь –
http://myip.ms/info/bots/Google_Bing_Yahoo_Facebook_etc_Bot_IP_Addresses.html