找回密码
 立即注册

QQ登录

只需一步,快速开始

查看: 654|回复: 1

[杂谈] 如何避免蜘蛛陷阱

[复制链接]
发表于 2015-10-28 10:01:42 | 显示全部楼层 |阅读模式 来自 中国–江苏–南通
    一些网站设计技术对搜索引擎而言很不友好,不利于蜘蛛爬行和抓取,这些技术被称为蜘蛛陷阱。 南京十胜石进行了总结,常见的蜘蛛陷阱分为以下的几种:

  Java Script链接

  示例:
  <a href=“javascript:location.href=‘2’;” class=“navtext”>网站设计</a>

  在网页穿插FLASH

  示例: flashObject(‘index.swf’)

  Session ID

  示例:
  百度推广官方网站
  http://fengchao.baidu.com/nirvana/main.html? userid=2473126#/manage/plan~_r=iwqk6gnq1y
  http://fengchao.baidu.com/nirvana/main.html? userid=2473126#/manage/plan~_r=3br2o0us12
  其中,红色字体为Sesssion ID值

  框架结构(iframe)

  示例: 百度MP3音乐盒
  /* NOTE: remove when alb release
   *#girliframe{width:340px; height:500px;border:0;} **/
  红色代码为百度音乐盒调用框架结构

  动态参数过多RUL

  示例: http://list.tmall.com/search_product.htm?spm=3.54626.101437.97&navlog=1&nav=spu-cat-qp&style=g&sort=s& q=%BF%C6%B1%A6&n=40&s=0&cat=50030199&is=cate#J_crumbs
  此URL中,动态参数过多,不利于搜索引擎蜘蛛抓取。

  社区等需要登陆页面

  蜘蛛和人一样,如果需要访问一些没有权限的页面,需要登陆进去,但是蜘蛛不会和人一样申请账号进行登陆,所以抓取不到没有权限的页面。
  做SEO时尽量避免以上一些不利于搜索引擎抓取的代码及结构,让搜索引擎更容易看懂你的网站!



发帖求助前要善用【论坛搜索】功能,那里可能会有你要找的答案;

如何回报帮助你解决问题的坛友,好办法就是点击帖子下方的评分按钮给对方加【金币】不会扣除自己的积分,做一个热心并受欢迎的人!

 楼主| 发表于 2015-10-28 10:03:04 | 显示全部楼层 来自 中国–江苏–南通

发帖求助前要善用【论坛搜索】功能,那里可能会有你要找的答案;

如何回报帮助你解决问题的坛友,好办法就是点击帖子下方的评分按钮给对方加【金币】不会扣除自己的积分,做一个热心并受欢迎的人!

回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则 需要先绑定手机号

关闭

站长推荐上一条 /1 下一条

QQ|侵权投诉|广告报价|手机版|小黑屋|西部数码代理|飘仙建站论坛 ( 豫ICP备2022021143号-1 )

GMT+8, 2025-1-22 23:46 , Processed in 0.041253 second(s), 8 queries , Redis On.

Powered by Discuz! X3.5

© 2001-2025 Discuz! Team.

快速回复 返回顶部 返回列表