很多站长朋友们SEO关键词
附加问题:我的根目录没有放置robots文件在站长后台的抓取诊断里显示robots封禁这是则么回事?
附加问题:我的根目录没有放置robots文件在站长后台的抓取诊断里显示robots封禁这是则么回事?
最佳答案:如果你的网站根目录下没存在这个robots.txt出现这个情况应该是百度bug。 你可以创建一个robots.txt 里面内容设置正确。然后再等数日查看结果。
日志里能看得到蜘蛛从哪个页面爬过来的吗
附加问题:日志里能看得到蜘蛛从哪个页面爬过来的吗