导致百度蜘蛛获取异常

> SEO优化技术> 导致Baiiduspider异常爬行

SEO优化技术天津 2年前（2016-12-21） 109°C

1）当前页面是无效页面（内容已删除死链等）直接跳转到上一个目录或主页百度建议网站管理员删除无效页面的入口超链接
2）跳转到错误或无效页面
注意：对于长期跳转到其他域名例如网站替换域名百度建议使用301跳转协议进行设置。
8其他异常：
1）百度异常参考：网页返回与普通内容不同的行为以供百度推荐。
2）百度ua的异常：网页返回与百度UA页面原始内容不同的行为。
3）JS跳转异常：网页加载百度无法识别的JS跳转代码以便用户通过搜索结果进入页面后跳转。
4）压力过大导致意外禁令：百度会根据网站规模访问量等信息自动设置合理的抓取压力。然而在异常情况下例如当压力控制异常时服务器将根据其自身负载执行保护性意外禁止。在这种情况下网站优化服务器将根据其自身负载执行保护性意外禁止。在这种情况下请在返回代码中返回503（表示“服务不可用”）以便Baiduspider会在一段时间后尝试抓取该链接如果该网站处于空闲状态则会成功抓取该链接。

转载请注明：天津seo教程_seo入门视频教程_seo培训教程＆raquo;导致Baiduspider抓取异常

标签： Baiduspider原因造成抓取异常