我们察看网站日志的时候会看到百度蜘蛛:Mozilla50 (patible; Bausper20; +bausearchsper)来爬行我们的网页。大家现在都知道有些站长工具或者采集程序,冒充百度蜘蛛来爬行我们的网站,那么我们怎么判断爬行我们网站的是不是真正的百度蜘蛛呢。
其实非常简朴假如你用的是Windos操纵系统那么可以用Windos自带的号召行号召tracert来判断是否只真正的百度蜘蛛。
首先察看百度蜘蛛的IP,然后点击开端运行,输入cmd,打开号召行,然后输入tracert 6113518612,这里6113518612典型网站日志里的百度蜘蛛的IP,那么可以看到如下的内容:
假如里面有cralbau的内容,那么说明就是真正的百度蜘蛛,如假包换。
上面这个截图里面含有ad,(bausper-ad-61-135-186-12cralbau [6113518612]),那么应该是百度联合的蜘蛛用来抓取页面里的内容以便匹配广告用的。
假如是真正的百度蜘蛛那么就是相似于(bausper-123-125-71-23cralbau [1231257123])这样的结局就是真正的百度蜘蛛。
途经观测LiboSEO自己网站的百度蜘蛛IP并途经测试得出:IP范畴在22018110811 ~ 220181108210 之间和1231257111 ~ 12312571161之间的都是真正的百度蜘蛛IP。这样纪实下常常见的百度蜘蛛IP,便捷一眼就看出日志里的是否真正的百度蜘蛛。