找回密码
 立即注册

QQ登录

只需一步,快速开始

查看: 3262|回复: 0

[分享] 提升站点蜘蛛爬行的方法

[复制链接]
发表于 2011-10-4 21:41:49 | 显示全部楼层 |阅读模式 来自 陕西省宝鸡市
搜索引擎:爬取程序URL(百度叫蜘蛛 谷歌叫机器人 总称为爬虫 简称索引)

1 蜘蛛对于网站爬取的次数越多有那些好处?
1、收录
索引列表 打开百度收索“XX”出来的排序,出来的排序页 就叫索引列表

被抓取了不代表被放出来预处理 预处理到放出时间

这个时间是由什么因素决定的呢? (快照时间并不是放出来当天的时间而是提交网站和放出网站 中间的一个时间短
在网站预处理 正式放出的时间短是由什么决定的?
与网站内容无关
与外链没什么关

与权重没什么关(信用跟权重不一样)
与信用度有关

蜘蛛抓取次数越多 预处理的时间越短 就可以提高


什么因素可以提升抓取次数呢?
蜘蛛抓取次数越多,占有服务器资源。

1)外部链接 (能提升蜘蛛的抓取次数,外链质量)
2)页面更新
3)网站结构

发帖求助前要善用【论坛搜索】功能,那里可能会有你要找的答案;

如何回报帮助你解决问题的坛友,好办法就是点击帖子下方的评分按钮给对方加【金币】不会扣除自己的积分,做一个热心并受欢迎的人!

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则 需要先绑定手机号

关闭

站长推荐上一条 /1 下一条

QQ|侵权投诉|广告报价|手机版|小黑屋|西部数码代理|飘仙建站论坛 ( 豫ICP备2022021143号-1 )

GMT+8, 2024-5-10 09:28 , Processed in 0.041181 second(s), 10 queries , Redis On.

Powered by Discuz! X3.5

© 2001-2024 Discuz! Team.

快速回复 返回顶部 返回列表