搜索引擎收录带?问号的动态页面问题
最近查看站点百度收录信息发现收录了部分带有?问号的动态页面地址,经过一番学习后,最终了解到可以在robots.txt协议文件里增加过滤项:
Disallow: /*?* #禁止访问网站中所有的动态页面
注意:
1、仅适用于全站静态化或伪静态的站点
2、此方法会导致站内某些内链(动态链接)失效,不过对站点整体收录实际上没啥影响
3、此方法简单理解就是禁止收录带参数的动态页面,这些页面往往是重复收录的根源(在启用全站静态化或伪静态情况下)。同时,启用此规则后,对蜘蛛访问频繁的站点还有缓解服务器压力的作用,同时能促进静态地址的收录。
本文作者:未来往事
本站使用「署名 4.0 国际」创作共享协议,可自由转载、引用,但需署名作者且注明文章出处
此处评论已关闭