找回密码
 立即注册

QQ登录

只需一步,快速开始

查看: 2099|回复: 0

[探讨] 通过日志,可以了解搜索引擎蜘蛛的访问情况。

[复制链接]
发表于 2012-6-16 10:34:19 | 显示全部楼层 |阅读模式 来自 中国–河北–石家庄
1、网站刚上线,看搜索引擎蜘蛛的抓取情况;
如果网站提交给搜索引擎2天后,发现日志里蜘蛛不少,并都返回200,则说明已经可以正常收录。
只是Google展示的时间比较快,而百度则需要20天左右(经验平均值)展示出来。

2、网站收录异常,对比日志中蜘蛛的行为情况;
收录正常增加时和现在异常时的日志,进行对比分析。如果没有异常,则应该是搜索引擎展示数据库出问题所致。
如果蜘蛛爬取量明显减少,观察是否外链突然减少很多。
如果日志依然,则认为是搜索引擎的展示问题。

解决网站被封问题时,观察日志情况。
网站被封时,往往日志里有百度蜘蛛,但很少,而且往往只访问robots.txt文件和首页经过这里的建议修改后,再提交给百度,之后的2天观察日志情况。
如果一直这样的情况维持1个月,可以考虑放弃该域名。
如果蜘蛛明显增加,而且返回200居多,则收录的希望很大,时间问题。

发帖求助前要善用【论坛搜索】功能,那里可能会有你要找的答案;

如何回报帮助你解决问题的坛友,好办法就是点击帖子下方的评分按钮给对方加【金币】不会扣除自己的积分,做一个热心并受欢迎的人!

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则 需要先绑定手机号

关闭

站长推荐上一条 /1 下一条

QQ|侵权投诉|广告报价|手机版|小黑屋|西部数码代理|飘仙建站论坛 ( 豫ICP备2022021143号-1 )

GMT+8, 2024-12-23 07:24 , Processed in 0.036488 second(s), 9 queries , Redis On.

Powered by Discuz! X3.5

© 2001-2024 Discuz! Team.

快速回复 返回顶部 返回列表