怎样辨别搜索引擎真假蜘蛛

SEO基础知识 保定SEO 488浏览

在管理网站过程中,分析网站日志使我们必须要做的,那么在分析过程中,对于真假蜘蛛我们可能无法辨别,摸不清头脑。随着技术的不断升级,很多采集程序会冒充百度蜘蛛来爬取我们的网站,导致我们无法辨别真假蜘蛛。下面天津SEO来给大家分享一下准确辨别的技巧。

怎样辨别搜索引擎真假蜘蛛

怎样辨别搜索引擎真假蜘蛛

点击开始》–运行》–输入cmd命令符》–接着输入nslookup+ip(你要查询的ip)

如果是真的↓↓↓

cmd命令符

cmd命令符

假的↓↓↓

怎样辨别搜索引擎真假蜘蛛

怎样辨别搜索引擎真假蜘蛛

注意:只要是百度的IP段,代码中会有出现:name:baiduspider,如果没有出现,那就不说不是真的百度IP段。

真蜘蛛官方文档这样记录:

移动ua:
Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
PC ua:
Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

转载请注明出处:保定SEO: » 怎样辨别搜索引擎真假蜘蛛