百度蜘蛛只爬首页不爬内页的可能原因分析

所属分类: 网站运营 / 网站优化 阅读数: 134
收藏 0 赞 0 分享

首先解决一个问题,怎么知道“百度蜘蛛只爬网站首页不爬内页”?
蜘蛛爬行情况可以通过网站IIS日志查看,日志里面清楚的记载着蜘蛛的爬行时间、爬行的页面、抓取的页面等信息。
神马?看不懂IIS日志?
网上有很多IIS日志分析工具,百度一下。这里推荐使用光年IIS日志分析工具,快速易用。
接下来,南唐给你分析下“百度蜘蛛只爬首页不爬内页”这个问题。
“百度蜘蛛只爬网站的首页不爬内页”原因有如下:
1、robots.txt,错误操作,屏蔽了内页。
2、群发等作弊行为。
3、服务器的原因。
4、网站首页到内页的链接太少,导航结构混乱,导航不清楚。
5、网站质量太烂,权重极低。
6、网站维护的时候三天打鱼两天晒网。
7、网站超级新,新的一塌糊涂。
8、网站还在百度的沙盒中,百度蜘蛛爬了,也抓取了,没有放页面快照。
首页能够被百度蜘蛛爬行,说明网站并不是让蜘蛛不屑一顾。
那肯定就是上面7条原因中的某一条或者N条,导致了“百度蜘蛛只爬网站的首页不爬内页”。
探讨到此完毕,最后的最后呢,针对上面“百度蜘蛛只爬网站的首页不爬内页”的8条原因,我们一一击破。
1-8 依次检查网站,逐一排除,逐一解决。
8大爆破方案如下:
破1、robots.txt的问题,浏览器输入,查看下,一目了然。
破2、这个情况,作为网站的维护者最清楚。如果有群发的seo作弊手法,造成百度蜘蛛只爬网站的首页不爬内页”很常见。
处理方法:
停止群发的一切seo作弊手法。
有规律并且持续的更新网站内容,网站内容最好原创,次点也要是高质量的伪原创。
适当的做点外链和友情链接,引引蜘蛛。
这种情况只能淡定的坚持,等。
破3、可以通过查询“网页http状态码 ”,分析网站返回的代码,判断问题原因。
还有一种情况,与你同IP服务器的网站被百度惩罚,从而牵连到你的网站。
要么你还淡定的坚持,等。要么换服务器。
破4、整理网站导航,理顺结构,让网站导航更清晰明了。
调用文章标题到首页,增加一个“最新文章”、“文章推荐”等版块,增加内页入口。
破5、站内文章垃圾得百度蜘蛛都懒得去爬,你还祈求蜘蛛爬完首页爬内页?
整理修改已经被百度收录的垃圾内容,清理未被收录的。
然后坚持有质量、有数量的更新网站内容,同时做好站外链接工作。
破6、月初更新一篇,月末更新一篇,天天抱怨为什么“百度蜘蛛只爬网站的首页不爬内页”。
省省力气更新几篇文章吧。
百度蜘蛛像人一样,它本来是1天来一次,你网站没有更新。然后就2天来一次,你的网站依旧没有更新。然后的然后就是5、10、15。
百度蜘蛛也有自己的行为习惯的,虽然它的智能很低级,也不能置之不理。
破7、作为一个新站就低调点,别天天都纠结“百度蜘蛛只爬网站的首页不爬内页”的问题。
制定自己的网站优化方案,维护更新管理的网站,切忌使用任何作弊手法。
破8、这个原因很难确定,如果以上原因你的网站都不存在,而你的网站也是“百度蜘蛛只爬网站的首页不爬内页”。
那么,就可能是还处在百度的沙盒之中。
这是百度对新网站的考查期,或者是网站被惩罚后的观察期。
淡定面对,积极执行已定的网站优化方案。
今天就这么滴吧,希望南唐的文章能够帮到你。
本文出自:南唐的网站优化博客,地址:http://www.ba77.com/post/15.html,转载须注明!

更多精彩内容其他人还在看

SEO搜索优化有哪些技巧?SEO优化几大技巧介绍

随着时间的推移,浏览一些同样的站主,看了他们的文章,感受颇多,在这里我就说一下自己关于网站的seo优化的几个技巧,希望能对大家有所帮助
收藏 0 赞 0 分享

SEO优化图片常见的方法有哪些?

现在这个时代是一个读图的时代,人们追求快速、一目了然了解一篇文章的中心主旨,这就对各大网站的优化大师做出了警告:做SEO的对图片优化必不可少!那么SEO优化图片常见的方法有哪些?下面我们一起来看看吧
收藏 0 赞 0 分享

如何避免企业网站变成鸡肋?让企业网站变得有用必须坚持的几点

曾经遇到过不少这样的企业网站客户,在做网站之前轰轰烈烈,网站上线之后热热闹闹,过了几天之后,冷冷清清,从最初的高大上变成“怨妇”,原因一般都是很简单,这网站和某某牛叉网站比较不行了,差老远。,那么,如何避免这样的事情发生呢?让企业网站变得有用呢
收藏 0 赞 0 分享

SEO思维怎么提升网站关键词排名?

如何提高关键词排名这个问题一直是很多小伙伴们都很关心的话题,最近百度慢慢在更新一些搜索引擎算法规则,导致部分站长们的网站都被降权、拔毛,下面小编为大家介绍SEO思维怎么提升网站关键词排名方法,来看看吧
收藏 0 赞 0 分享

seoer必看:网站外链建设的13种方法

相信很多站长都知道外链的重要性,虽然百度一直在打击垃圾外链,也降低了不少外链对页面的权重积分计算。但是现在外链依然是能够提高排名的重要方式,下面为大家分享网站外链建设的13种方法,来看看吧
收藏 0 赞 0 分享

如何微调网站挖掘用户需求提升排名?

用户的需求不断变化,网站不可能一直保持不变不跟随需求改变而改变。微调就是不断发现用户新的需求然后修改网站布局以及内容让网站更符合当下用户的需求,从而促进关键词排名
收藏 0 赞 0 分享

不同的搜索引擎如何更好的优化网站?

程序是模拟人为的行为学,搜索引擎同样是程序,搜索引擎早就有分词技术,网站蜘蛛会像人一样去尝试理解你的文章内容,这点通过判断语句就可以实现,既然需要判断就肯定有判断条件,判断条件又有哪些呢?不同的搜索引擎如何更好的优化网站?我们来看看吧
收藏 0 赞 0 分享

实际案例通过逆向思维实施SEO达成目的

听起来似乎和开启了CND加速的道理有异曲同工之妙,可事实上就是如此,当你能够熟练的使用这种方法解决问题的时候,很多棘手、毫无头绪的问题就会迎刃而解。接下来小编就给大家分享一个实际的案例来验证逆向思维的奥妙,来看看吧
收藏 0 赞 0 分享

如何选择网站流量统计工具

如今的互联网有着各种流量统计工具可供SEO人员选择,常见的有Google Analytics、百度统计、51la、CNZZ等都是不错的流量统计工具,不同的流量统计工具都有着各自的优缺点
收藏 0 赞 0 分享

流量统计的基本数据及作用概述

在流量统计中会有各种数据来体现网站当前的流量状况,越强大的流量统计工具拥有越丰富的数据,比如Google Analytics有着几十个流量报表,每个报表都有着特定的分析作用
收藏 0 赞 0 分享
查看更多