1. 首页
  2. 网站建站
  3. >

网站日志中百度蜘蛛的真伪判断是什么(百度蜘蛛真假查询)

当我们查看网站日志时,我们会看到百度蜘蛛:Mozilla/5.0(兼容;Baiduspider/2.0;+http://www.baidu.com/search/spider.html)正在抓取我们的网页。现在大家都知道有些站长工具或者采集程序冒充百度蜘蛛来抓取我们的网站。那么我们如何判断我们网站上的爬虫是否是真正的百度蜘蛛呢?

其实很简单。如果您使用的是Windows操作系统,可以使用Windows自带的命令行命令tracert来判断是否是真正的百度蜘蛛。

网站日志中百度蜘蛛的真伪判断是什么(百度蜘蛛真假查询)

首先查看百度蜘蛛的IP,然后点击开始运行,输入cmd,打开命令行,然后输入tracert 61.135.186.12,其中61.135.186.12代表网站日志中百度蜘蛛的IP,然后就可以看到以下内容:

如果里面有crawl.baidu.com内容,就说明是真正的百度蜘蛛,保证是正版。

上面的截图包含广告,(baiduspider-ad-61-135-186-12.crawl.baidu.com [61.135.186.12]),所以应该是百度联盟的spider用来抓取页面内容来匹配广告。使用。

如果是真实的百度蜘蛛,那么结果类似于(baiduspider-123-125-71-23.crawl.baidu.com [123.125.71.23]),这是真实的百度蜘蛛。

通过观察LiboSEO自有网站的百度蜘蛛IP并进行测试,我们发现220.181.108.11 ~ 220.181.108.210和123.125.71.11 ~ 123.125.71.161之间的IP范围都是真实的百度蜘蛛IP。这样就记录了常见的百度蜘蛛IP,这样你就可以一眼看出日志中的是否是真正的百度蜘蛛。