robots怎么设置禁止抓取某些图片

554浏览
我在网站的根目录下新建了一个目录有一些图片用于调试程序的,想禁止百度图片搜索收录网站某些图片该如何设置?
√ 推荐回答

禁止Baiduspider抓取网站上所有图片、禁止或允许Baiduspider抓取网站上的某种特定格式的图片文件可以通过设置robots实现,请参考“robots.txt文件用法举例”

1、禁止访问网站中所有的动态页面

User-agent: *

Disallow: /*?*

2、 禁止Baiduspider抓取网站上所有图片

仅允许抓取网页,禁止抓取任何图片。

User-agent: Baiduspider

Disallow: /*.jpg$

Disallow: /*.jpeg$

Disallow: /*.gif$

Disallow: /*.png$

Disallow: /*.bmp$

3、仅允许Baiduspider抓取网页和.gif格式图片

允许抓取网页和gif格式图片,不允许抓取其他格式图片

User-agent: Baiduspider

Allow: /*.gif$

Disallow: /*.jpg$

Disallow: /*.jpeg$

Disallow: /*.png$

Disallow: /*.bmp$

4、仅禁止Baiduspider抓取.jpg格式图片

User-agent: Baiduspider

Disallow: /*.jpg$

相关SEO术语解释:

百度K站:

百度K站有轻重之分,刚开始可能会快照回档,关键词排名大幅度下降,但是没有掉到 100 以后。这些是初期不良的状态。到中期,如果站长还没有做改善,快照会被打到无百度快照,关键词排名全部 100 以外,这是严重警告。如果后期还不改善的话,就是降权了。

百度索引:

百度索引量是指有多少页面作为搜索候选结果。对于新站,由于收录比较慢,那么索引量一般远远大于收录,这是正常的现象,也是网站良好的表现,而且这些索引量在未来大部分可能会变成网站的可以搜索的收录量。

百度权重:

百度权重是站长工具等网站推出的针对网站关键词排名预计给网站带来流量,划分等级0- 9 的第三方网站欢迎度评估数据。百度官方明确表示不承认百度权重。百度权重并不是像谷歌的PR、搜狗的SR、IBM hits等那样是对网站的综合评级的算法。百度权重只是针对关键词排名方面给网站带来的欢迎度进行评级。

推荐阅读

斗牛SEO工具:收录、排名查询、关键词挖掘工具

SEO tools是一款经典的SEO工具,提供批量查询采集、关键词排名查询、关键词挖掘、索引检查、站群索引检查、关键词挖掘、状态码查询、分词工具等功能。该工具具有批处理速度、多线程运行、智能原创设置、无需安装Net和JAVA环境等特点。是站长们的得力......

网址误删除后该如何操作?百度能恢复对该网址的收录吗?

若您不小心误删除了网址,请在网址删除页面,把该数据删除,在添加数据中重新添加您的网址,百度将恢复对该网址的收录。...