找回密码
 立即注册

QQ登录

只需一步,快速开始

查看: 2657|回复: 0

[探讨] 不利于蜘蛛爬行和抓取要如何避免?

  [复制链接]
发表于 2014-5-13 13:22:31 | 显示全部楼层 |阅读模式 来自 浙江省杭州市
  要想在搜索引擎获得比较好的排名,与蜘蛛打好关系是非常重要的,什么是蜘蛛陷阱呢?蜘蛛陷阱是阻止蜘蛛程序抓取网站内容的程序代码,对搜索引擎不友好,不利于蜘蛛爬行和抓取。那么我们如何避免呢?

  一、网站首页不要采用Flash结构

  蜘蛛是很难理解Flash上面的内容的,抓取比较困难。

  二、尽量不要采用JavaScript代码

  为了提高网站对搜索引擎的友好访问,建议网站不要采用JavaScript代码,一些JS达到的效果Css是同样可以达到的。虽然蜘蛛能够理解JS里面的链接,但是要花费一段周期,时间成本很宝贵的。

  三、尽量不要采用框架结构

  ifrmae框架结构部不利于搜索引擎收录。

  四、避免过多的URL动态参数

  在url中加入过多的动态参数,不利于搜索引擎蜘蛛抓取,虽然搜索引擎对已经不是问题,但是从友好度讲,静态网页要好的多,还能方便用户记忆。

  五、不要采用SessionId页面

  蜘蛛每次访问都作为一个新用户,都会在Url中生成新的SessionId页面,这样一来就会生成很多重复页面,造成页面相识度过高。

  六、页面跳转

  页面跳转的方式一般有:301跳转,302跳转,Meta Refresh,JS等代码,给蜘蛛(本文由www.shengzhujiage.com整理,转载请注明)的抓取带来不便,蜘蛛是很反感页面跳转的,尽量不要采用。

  七、网页层级不要太深

  层级太深,蜘蛛抓取很困难,一般网站首页权重最高,内容到首页的距离太远,被分到的权重就会减少。如果内容不是太多,尽量采用一个层级,这样缩短内容到达首页的距离,越容易得到首页权重传递。


评分

参与人数 1金币 -80 收起 理由
天外飘仙 -80 无交流意向

查看全部评分

发帖求助前要善用【论坛搜索】功能,那里可能会有你要找的答案;

如何回报帮助你解决问题的坛友,好办法就是点击帖子下方的评分按钮给对方加【金币】不会扣除自己的积分,做一个热心并受欢迎的人!

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则 需要先绑定手机号

关闭

站长推荐上一条 /1 下一条

QQ|侵权投诉|广告报价|手机版|小黑屋|西部数码代理|飘仙建站论坛 ( 豫ICP备2022021143号-1 )

GMT+8, 2024-5-5 19:13 , Processed in 0.048426 second(s), 12 queries , Redis On.

Powered by Discuz! X3.5

© 2001-2024 Discuz! Team.

快速回复 返回顶部 返回列表