rinald_未来往事

搜索引擎收录带?问号的动态页面问题

随笔/分享
最近查看站点百度收录信息发现收录了部分带有?问号的动态页面地址,经过一番学习后,最终了解到可以在robots.txt协议文件里增加过滤项:
Disallow:  /*?* #禁止访问网站中所有的动态页面

注意:
1、仅适用于全站静态化或伪静态的站点
2、此方法会导致站内某些内链(动态链接)失效,不过对站点整体收录实际上没啥影响
3、此方法简单理解就是禁止收录带参数的动态页面,这些页面往往是重复收录的根源(在启用全站静态化或伪静态情况下)。同时,启用此规则后,对蜘蛛访问频繁的站点还有缓解服务器压力的作用,同时能促进静态地址的收录。
原文作者:rinald
原文地址:http://fity.cn/post/582.html
互联网技术更新较快,本站很多文章具有实效性,我会及时更新原文,但转载的文章无法通知更新。为了不给读者造成困惑或误导,请您在转载时保留此出处信息,尊重别人也是尊重自己。

发表评论

必填

选填

选填

必填

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。