网路资讯查询和主机是唯一的标准来判断是否一个IP是一个真正的蜘蛛。
1。确定百度蜘蛛通过UAUA头信息是指用户代理信息将客户端系统和浏览器记录一些信息。如果Baiduspider出现在UA头信息这意味着请求由百度蜘蛛程序。(标识不是很准确。UA头可以伪造。)
2。确定百度蜘蛛的源IP段百度蜘蛛是一个全面的蜘蛛程序推否SEO快速排名友情链接交换这意味着请求由百度蜘蛛程序。(标识不是很准确。UA头可以伪造。)
2。确定百度蜘蛛的源IP段百度蜘蛛是一个全面的蜘蛛程序具有IP范围(如:220.181.108.75
220.181.108.123))例如使用的IP蜘蛛程序爬行主页可能不同于使用的IP内部页面爬行。有百度蜘蛛在网上的IP段分布表。你可以检查信息但对于精度建议咨询百度官方特定IP段范围。
3。查询域名绑定到访问IP我们可以查询绑定IP和域名之间的关系通过技术手段并在Windows上使用nslookup命令查询。例如如果我们找到百度蜘蛛从日志的IP地址我们可以直接确认是否绑定到百度的域名使用下面的命令:
这个方法的真实性是唯一判据百度蜘蛛!
是判断一个IP是否使用的IP百度蜘蛛通过UA头信息或IP段有风险因为UA头和源IP可以伪造的!