分享好友 知道首页 知道分类 切换频道 我要提问

robots文件禁止蜘蛛爬行对于已收录页面有什么影响?

已解决4回答
如果我想修改网站标签模板,短期内禁止了蜘蛛的爬行,过段时间再允许,会引起降权吗?对于已经收录的页面有影响没?会顺利显示成修改后的模板页面吗?
2022-03-17 10:22 已解决
反对 0
举报
收藏 0
支持 0 反对 0 举报
Robots设置禁止爬行规则. 过段时间再放开,这个是不会引起降权的; 对已经收录的URL再没有替补URL的情况下最好不要通过robots来禁止爬行. 如果你只是修改标签可直接进行模板修改不会有影响
支持 0 反对 0 举报
Robots本身就是站长与百度达成的一个协议或者约定,如果不允许,蜘蛛就不会再爬去该页面,如果你禁止后一段时间然后再允许,网站是不会被降权。对于已收录的页面仍然保留。当然,如果你修改完标签模板后,允许蜘蛛爬取后,过段时间收录的会显示为你新修改的页面,这没有什么异议。
支持 0 反对 0 举报
多此一举,修改后的不一样抓取么。
支持 0 反对 0 举报