页面蜘蛛是怎么爬行的

守望幸福2015

需要注册的内容和第一次点击免费
    　　如果强制用户注册(无论付费或免费)才能访问内容，最好对已登录用户和未登录用户保持同样的URL，给未登录用户和搜索引擎显示一个摘要(通常以到两端就够了)。如果你想显示完整内容给搜索引擎，可以使用一些内容传送规则，例如新访问者没有注册之前可以访问最初一到两页内容，过了这个宽限期后就要求注册。这使你的意图很诚实，也可以使用C或S限制用户访问，同时显示完整内容给搜索引擎。
    　　在这种情况下，你也可以选择参与G的第一次点击免费(F CF)计划。只要点击搜索结果的用户能够免费访问第一篇文章，网站就可以将付费或需要登录的内容显示给G蜘蛛。很多著名网站发布商使用这项技术，包括热门网站E-E.。
    　　更明确地说，要实施第一次点击免费，发布商必须续页G蜘蛛(可能还有其他搜索引擎蜘蛛)访问他们想要被索引的所有内容，即使用户通常需要登录才能看到这些内容。访问网站的用户还是需要登录，但是搜索引擎蜘蛛不需要。这将导致在适当时候网站内容会在搜索结果中出现，然而，如果一个用户点击搜索结果来到你的网站，你必须允许他访问整篇文章(如果是包含对个页面的文章，需要允许访问文章的所有页面)。一旦用户点击访问网站上的另一篇文章，你可以要求他登录。
    　　更多细节可以参考G的第一次点击免费计划页面：:
    　　搜索引擎不能爬行的导航
    　　如果你的导航是F/JS/J或其他不能爬行的格式，应该考虑给搜索引擎显示一个可以爬行抓取的HTML内容版本。很多网站简单地通过CSS层显示一个人可见搜索引擎不可见的层。也可以使用标签，虽然这通常危险性更大，因为很多作弊者使用隐藏内容。A最近发布了一个SEO与F门户，**搜索引擎确认的帮助F文件被发现的最佳实践。小心确保搜索引擎可见层显示的内容与人可见层的内容是本质相同的。
    　　复制内容
    　　如果一个页面内容的很大一部分是复制的，可以考虑将它放在一个通过.文件禁止爬行的中，限制蜘蛛访问。这确保你可以给搜索引擎显示独特页面，同时避免复制内容问题。

此文章由五一手拉葫芦http://www.zj51jx.com/网站编辑整理发。

newlive

看不懂啊，不过沙发

丽人女性

不错

满分企业

页面蜘蛛很重要