如果要禁止某个页面被抓取，在文档头部meta标签声明或robots封禁有什么区别？

hyhlzi · 发表于 2015-9-5 07:46:48

比如我要禁止/file.html被抓取，
可以robots封禁：
User-agent: *
Disallow: /file.html

也可以文档头部meta标签声明：
<meta name="robots" content="none" />

不知有什么区别？哪个好些？

天外飘仙 · 发表于 2015-9-5 08:43:39

没有区别的，只是写法不同而已；
(转)网页头部<meta name="Robots" 用法 <meta>系列用法. http://blog.csdn.net/xiongchao2011/article/details/7038627 这个文章你可以参考一下

hyhlzi · 发表于 2015-9-5 09:00:15

天外飘仙发表于 2015-9-5 08:43
没有区别的，只是写法不同而已；
(转)网页头部

喔⊙ω⊙，，

		自动登录	找回密码
密码			立即注册

[探讨] 如果要禁止某个页面被抓取，在文档头部meta标签声明或robots封禁有什么区别？