这样写robots对吗？求指导

ゞ狼尐爺〆 · 发表于 2012-9-3 12:25:16

讨教一个关于问题robots写法的问题，我robots里面之前是模版默认的，没改，现在我想把sitemap和禁止爬取图片放进去，那要不要把以前禁止蜘蛛爬取的都删掉呢？
只留下sitemap！
User-agent: *
Disallow: /admin/
Disallow: /cache/
Disallow: /ewebeditor/
Disallow: /images/

ent2012ycx · 发表于 2012-9-3 12:36:16

禁止爬取图片是Disallow: /images/ 但是如果所有的图片并不是都放在images文件夹
建议试用Disallow: /*.jpg$
　　Disallow: /*.jpeg$
　　Disallow: /*.gif$
　　Disallow: /*.png$
　　Disallow: /*.bmp$
其他的我就不懂了。。。。
我也是个新手说错了勿怪

番号 · 发表于 2012-9-3 21:35:33

魂飞胆丧理发店还是了

悦鹜 · 发表于 2012-9-10 15:08:08

LZ那个应该是对的吧，二楼那种是什么意思？求解

		自动登录	找回密码
密码			立即注册

[求助] 这样写robots对吗？求指导

评分

评分

评分

站长推荐 /1