收藏本站帮助侵权投诉飘仙建站网

切换到宽版

飘仙建站论坛»论坛 › 站长交流区 › 站长俱乐部（建站经验交流） › Unknown robot (identified by 'spider') 这个是哪个的 ...

返回列表发新帖

查看: 2148|回复: 1

[探讨] Unknown robot (identified by 'spider') 这个是哪个的蜘蛛？

发表于 2015-1-8 20:13:13 | 显示全部楼层 |阅读模式来自天津市

Unknown robot (identified by 'spider') 这个是哪个的蜘蛛？

怎样把它除掉？

这个, 哪个, 个的, 蜘蛛, 怎样

发帖求助前要善用【论坛搜索】功能，那里可能会有你要找的答案；

如何回报帮助你解决问题的坛友，好办法就是点击帖子下方的评分按钮给对方加【金币】不会扣除自己的积分，做一个热心并受欢迎的人！

回复

使用道具举报

发表于 2015-1-8 20:17:34 | 显示全部楼层来自河南省新乡市

这个是未知蜘蛛；
BaiDuSpider百度蜘蛛占用流量,robots.txt设置 http://www.wensuhulian.com/faq/list.asp?unid=389
你可以参考这个文章里面的示例 6，设置一下仅允许主要的几个蜘蛛来爬

评分

参与人数 1	金币 +3	收起理由
抢楼评分专号	+ 3	很幸运，你获得了抢楼奖励！

查看全部评分

发帖求助前要善用【论坛搜索】功能，那里可能会有你要找的答案；

如何回报帮助你解决问题的坛友，好办法就是点击帖子下方的评分按钮给对方加【金币】不会扣除自己的积分，做一个热心并受欢迎的人！

回复支持反对

使用道具举报

返回列表发新帖

站长推荐 /1

|侵权投诉|广告报价|手机版|小黑屋|西部数码代理|飘仙建站论坛 ( 豫ICP备2022021143号-1 )

GMT+8, 2024-6-1 08:31 , Processed in 0.036705 second(s), 9 queries , Redis On.

Powered by Discuz! X3.5

© 2001-2024 Discuz! Team.

快速回复 返回顶部 返回列表