网站禁止收录所有动态页面,该怎么设置?

463浏览
√ 推荐回答

我们知道动态页面都有一个共同的特征,就是在链接里会带有"?"这个问号的符号,因此我们可以在robots.txt文件里写入如下这样的规则:

User-agent: *

Disallow: /*?*

+ 扩展问答

怎样禁止百度收录网站的动态页面

问:我的网站做了有两个多月了,现在百度收录基本能保持时时收录,但现在出...

答:所以我们要屏蔽这样的动态页面,从而降低我们网页的重复页面。那么我们只要在robots.txt文件里面,加上这样的代码就行了:"Disallow:/*?*”。这个代码的意思是根目录下个所有动态禁止搜索引擎访问。

百度既收录静态页面,也收录动态页面,怎么让它不收录动态页面?

答:用robots.txt可以屏幕掉动态的收录,这样百度会只收静态地址。具体的办法是在robots.txt中加入一句,Disallow: /*?这样就可以屏蔽掉动态地址的收录。希望对你有所帮助,也希望给予加分。

怎么禁止搜索引擎收录动态内容

问:一个内部业务系统,不想被爬虫收录。 请问该如何做

答:例如,如果百度快照中缓存的文件为style.css,那么我们在服务器上编辑这个文件,在CSS文件中加入以下语句,即可控制百度缓存快照重定向,从而实现屏蔽百度网页快照内容的功能。body {onload:expression(location.href= 'http://...

推荐阅读

斗牛SEO工具:收录、排名查询、关键词挖掘工具

SEO tools是一款经典的SEO工具,提供批量查询采集、关键词排名查询、关键词挖掘、索引检查、站群索引检查、关键词挖掘、状态码查询、分词工具等功能。该工具具有批处理速度、多线程运行、智能原创设置、无需安装Net和JAVA环境等特点。是站长们的得力......

网址误删除后该如何操作?百度能恢复对该网址的收录吗?

若您不小心误删除了网址,请在网址删除页面,把该数据删除,在添加数据中重新添加您的网址,百度将恢复对该网址的收录。...