网站优化 搜索引擎收录网页的四个阶段

所属分类: 网站运营 / 网站优化 阅读数: 50
收藏 0 赞 0 分享

作为SEO从业者,不仅要被搜索引擎抓取,还要被收录,最重要的是在收录后有良好的排名,本文将简单分析下搜索引擎收录网页的四个阶段。每个网站、每个网页的排名都是不一样的,看看你的网站处于哪个阶段呢?

搜索引擎收录网页的四个阶段

网页收录第一阶段:大小通吃

搜索引擎的网页抓取都是采取「大小通吃」的策略,也就是把网页中能发现的链接逐一加入到待抓取URL中,机械性的将新抓取的网页中的URL提取出来,这种方式虽然比较古老,但效果很好,这就是为什么很多站长反应蜘蛛来访问了,但没有收录的原因,这仅仅是第一阶段。

网页收录第二阶段:网页评级

而第二阶段则是对网页的重要性进行评级,PageRank是一种著名的链接分析算法,可以用来衡量网页的重要性,很自然的,站长可以用PageRank的思路来对URL进行排序,这就是各位热衷的「发外链」,据一位朋友了解,在中国「发外链」这个市场每年有上亿元的规模。    

爬虫的目的就是去下载网页,但PageRank是个全局性算法,也就是当所有网页有下载完成后,其计算结果才是可靠的。对于中小网站来讲,服务器如果质量不好,如果在抓取过程中,只看到部分内容,在抓取阶段是无法获得可靠的PageRank得分。

网页收录第三阶段:OCIP策略

OCIP策略更像是PageRank算法的改进。在算法开始之前,每个网页都给予相同的「现金」,每当下载某个页面A后,A将自己的「现金」平均分给页面中包含的链接页面,把自己的「现金」清空。这就是为什么导出的链接越少,权重会越高的原因之一。

而对于待抓取的网页,会根据手头拥有的现金多少排序,优先下载现金最充裕的网页,OCIP大致与PageRank思路一致,区别在于:PageRank每次要迭代计算,而OCIP则不需要,所以计算速度远远快于PageRank,适合实时计算使用。这可能就是为什么很多网页会出现「秒收」的情况了。

网页收录第四阶段:大站优先策略

大站优先的思路很直接,以网站为单位来衡量网页的重要性,对于待抓取的URL队列中的网页,根据所述网站归类,如果哪个网站等待下载的页面最多,则优先下载这些链接。其本质思想是「倾向于优先下载大型网站URL」。因为大型网站往往包含更多的页面。鉴于大型网站往往是名站,其网页质量一般较高,所以这个思路虽然简单,但有一定依据。

实验表明这个算法虽然简单粗暴,但却能收录高质量网页,很有效果。这也是为什么许多网站的内容被转载后,大站却能排到你前面的最重要原因之一。

更多精彩内容其他人还在看

采用正当网站策略来优化网站的方法(图文)

网站优化中需要注意哪些策略呢
收藏 0 赞 0 分享

对淘宝网搜索规则以及排名规则的探讨(图文)

把淘宝的搜索规则弄懂了.才会更有利于商品的排名及名称优化
收藏 0 赞 0 分享

百度知道做电影流量关键词的技巧分析

 现在做关键词的手段各式各样,最终的目的还是为了流量。一部热门影片的搜索指数高到吓人,但能够出现在百度搜索结果前列的个人网站并不多,大部分都是百度百科,时光网,贴吧,大牌视频网站。
收藏 0 赞 0 分享

SEO是什么?SEO搜索引擎优化相关术语介绍

SEO(Search Engine Optimization),汉译为搜索引擎优化,是较为流行的网络营销方式及NNT流量,主要目的是增加特定关键字的曝光率以增加网站的能见度,进而增加销售的机会
收藏 0 赞 0 分享

6.22百度k站事件给我们的反思 做优质内容站

相信大家最近一段时间都知道6.22 6.28百度地震的事件吧。最近我在一些seo论坛和一些站长论坛听到很多人都说百度从6月22日开始很多网站被k了,相距6月28日又有很多站长反应被k站的问题
收藏 0 赞 0 分享

百度最喜欢什么样的网站分享

其实不论是什么网站,只要用户喜欢,自己热爱的网站,能帮助到别人的网站就是好网站,自然也就百度喜欢了,坚持与优质内容
收藏 0 赞 0 分享

链接的数量、广泛多样化是把双刃剑 成功要得法

搜索引擎越来越重视用户体验已经是个趋势,但是这并不能否定链接和原创内容的重要性
收藏 0 赞 0 分享

让你更好的利用外链资源做网站推广(四点原则)

外链在网站推广中的作用大家都是知道的,那么关于外链资源的应用有哪些方法和技巧呢,武汉seo公司要是能够运用好外链资源,seo优化就能起到事半功倍的作用
收藏 0 赞 0 分享

网站上线后应按照方法做seo推广工作小结

刚刚新建起来的一个网站,下一步的工作就是做好网站推广了,那么网站推广工作的展开要怎么开始呢,所要做的基本工作是哪些,下面武汉seo公司就为新手朋友做个简单介绍吧
收藏 0 赞 0 分享

利用相关性提高网站关键词排名的方法

大家都知道网站的相关性对整个网站的专业性,网站的权威性,网站的权重高低都有一个非常重要的评价,如果我们能从网站的主题,内容,以及外链等加以深化做到相关性非常高的话对网站关键词排名是非常有好处的
收藏 0 赞 0 分享
查看更多