找回密码
 立即注册

QQ登录

只需一步,快速开始

查看: 1532|回复: 1

[软文] 浅谈如何处理好网站与蜘蛛的关系

[复制链接]
发表于 2011-9-22 23:35:14 | 显示全部楼层 |阅读模式 来自 中国–广西–贵港
相信有很多人都有研究过蜘蛛,因为我们网站的内容都是需要靠蜘蛛来爬取,提供给搜索引擎,要是蜘蛛来爬取完网站回去时对我们网站充满怨气的话,那相信搜索引擎对网站也不会有什么好感,所以一般我们做网站时都会研究好蜘蛛的喜好和厌恶,对症下药,来迎合蜘蛛。让蜘蛛在我们网站勤快的爬,多来几次,多收录网站页面,从而提升排名。那么蜘蛛有什么喜好和厌恶呢?  首先来说说蜘蛛的喜好:
  1、蜘蛛喜欢新事物,软文和原创文章都特别中意,每天定时、有规律的更新几篇原创或者去A5,SEOWHY上发发软文,绝对对蜘蛛胃口。
  2、虽然蜘蛛没有上、下班,但它会根据你平时更新网站内容的时间,来确定什么时候来你网站爬取才有新内容带走,所以每天网站更新内容尽量在同一时间段。
  3、蜘蛛也喜欢到人多的地方,而且去的很勤快,大家都清楚,权重高的一些门户网站和论坛很多内容都是秒收的。所以多在一些权重高的论坛,博客多发发外链能提高蜘蛛来网站的次数。
  再说说蜘蛛厌恶什么?
  1、蜘蛛讨厌服务器不稳定,蜘蛛一般都是顺着网站结构往深处爬,要是打开网页一卡一卡的,或者突然访问不了了,蜘蛛肯定无法正常爬取,直接跳出也是正常的。死链接也是一样。
  2、蜘蛛讨厌网站结构太多层次的,它会绕不出来,太久没回应时搜索引擎会直接招回去,就无法再爬取我们网站。
  3、蜘蛛不喜欢动态URL,可能导致蜘蛛进入死循环。
  4、不喜欢FLASH、JS代码,因为它基本不认得,抓取不了。
  5、不喜欢跳转,对这些很敏感。
  6、讨厌需要登录才能浏览内容的网站,因为它不会注册,所以看不了。
  蜘蛛差不多就这些特性了,有时候感觉蜘蛛有点像文盲,http://www.020daiyunwang.com这也不会,那也不做,执行力太差了,但是我们又不得不伺候好它,要想获得好的排名和流量,必须像太监伺候皇上一样,它喜欢什么,就送到它嘴边,不喜欢什么,就尽量不做。

发帖求助前要善用【论坛搜索】功能,那里可能会有你要找的答案;

如何回报帮助你解决问题的坛友,好办法就是点击帖子下方的评分按钮给对方加【金币】不会扣除自己的积分,做一个热心并受欢迎的人!

发表于 2011-9-23 10:11:59 | 显示全部楼层 来自 中国–上海–上海–黄浦区
看来蜘蛛讨厌的东西还真是多啊!学习了,感谢分享

发帖求助前要善用【论坛搜索】功能,那里可能会有你要找的答案;

如何回报帮助你解决问题的坛友,好办法就是点击帖子下方的评分按钮给对方加【金币】不会扣除自己的积分,做一个热心并受欢迎的人!

回复 支持 反对

使用道具 举报

▶专业解决各类DiscuzX疑难杂症、discuz版本升级 、网站搬家 和 云服务器销售!
▶有偿服务QQ 860855665
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

站长推荐上一条 /1 下一条

QQ|侵权投诉|广告报价|手机版|小黑屋|西部数码代理|飘仙建站论坛 ( 豫ICP备2022021143号-1 )|网站地图

GMT+8, 2026-4-26 23:21 , Processed in 0.046883 second(s), 12 queries , Redis On.

Powered by Discuz! X3.5

© 2001-2026 Discuz! Team.

快速回复 返回顶部 返回列表