我们通过对网站进行日志分析,可以看到百度蜘蛛来抓取我们的网页,但是随着互联网技术的快速发展,很多时候会有一些虚拟采集程序伪装成百度蜘蛛来抓取我们的网页,下面笔者就来教大家如何分辨真假百度蜘蛛,以及百度假蜘蛛对SEO有什么影响。
如何分辨真假百度蜘蛛,有两种方法,如下所示:
1. 点击开始—运行—搜索中输入”cmd”命令符,接着输入“nslookup+ip”出现的结果如下图,可以看到结果显示名称“baiduspider-123-125-71-88.crawl.baidu.com”,说明这个是真的百度蜘蛛。
2. 点击开始—运行—搜索中输入”cmd”命令符,接着输入“tracert+ip”出现的结果如下图,可以看到结果显示名称“baiduspider-123-125-71-88.crawl.baidu.com [123.125.71.97]”,说明这个也是真的百度蜘蛛。
如果假的百度蜘蛛IP段,如下图。
那么百度假蜘蛛对SEO有什么影响呢?
1. 百度假蜘蛛在抓取网站内容时,占用网络带宽,无效流量上涨。
2. 如果在有限带宽的前提下,会影响真蜘蛛的正常抓取。
3. 百度假蜘蛛返回来的信息,对我们SEO优化思路产生干扰。
4. 部分的百度假蜘蛛是来采集我们网站的内容。
总结:对于如何分辨真假百度蜘蛛的问题,笔者已分享两种辨别方法,笔者建议,我们需要养成定期分析网站日志的好习惯,如发现百度假蜘蛛的访问,我们就必须屏蔽该ip段,以免影响SEO优化工作的正常进行。