SEO技术实践操作之网站蜘蛛日志分析

所属分类: 网站运营 / 网站策划 阅读数: 204
收藏 0 赞 0 分享

  总有人在问为什么要看网站日志,网站日志怎么看,但是回答的都不多,脚本之家的小编觉得想看到答案的人有很多所以今天就来告诉一下还没有接触网站日志或者接触了网站日志,但是不知道怎么去分析的小伙伴们,希望对你们有所帮助。

  首先我们来看看什么是网站日志?网站日志是记录web服务器接收处理请求以及运行时错误等各种原始以·log结尾的文件信息,准确的说法应该是WEB服务器日志。SEO们常说的网站日志最大的意义是记录网站运营中网站实时的运行情况,网站用户访问记录,网站蜘蛛爬行记录等。通过网站日志可以清楚的得知用户在什么IP、什么时间、用什么操作系统、什么浏览器、什么分辨率显示器的情况下访问了你网站的哪些页面,访问状态是否成功,这些都可以在网站日志中看见。

  根据上面我们对网站日志有了一个大楷的了解,可是我们还是不知道网站日志长什么样的,接下来我们在看看网站日志长什么样,这里就以SEO博客的日志给大家展示一下。

  2014-09-20 04:23:14 W3SVC1328191266 59.188.69.102 GET /biji/11.html - 80 - 123.125.71.54 Mozilla/5.0+(compatible;+Baiduspider-cpro;++http://www.baidu.com/search/spider.html) 200 0 0

  上面那段日志就是w3c标准的日志,这条日志是一台百度蜘蛛抓取SEO博客笔记栏目下的一篇文章记录,我们就来解决怎么看网站日志的情况,其实有很多日志分析工具也可以帮忙的,我们小站就收工分析一下就行啦,下面就一起来一点一点的跟分析一下这段日志是什么意思吧。

  2014-09-20  04:23:14这个是记录蜘蛛抓取(或者是爬行)网站的时间

  W3SVC1328191266这个是记录网站日志的标准

  59.188.69.102 被蜘蛛访问的网站,做互联网的基本都清楚,域名只是让我们方便记忆和传播,在我们访问网站的时候,其实在后台要运行解析,把域名转化成IP地址,所以这段IP就是网站的IP了。

  GET /biji/11.html 被访问的路径,看到这里,相信聪明的小伙伴已经知道,我们为什么要来分析一下网站的日志了吧?因为只有分析日志我们才知道我们网站是否有蜘蛛来爬行,爬行了我们网站哪些目录和页面,哪些页面和目录没有被爬行,作为网站的站长我们就要去分析为什么没有被蜘蛛爬行的原因了。

  80 这个是网站的端口,服务器与你的电脑互通的端口

  123.125.71.54 访问者的IP,我们可以通过日志找到是谁在什么地方访问的我们,我们可以通过IP查询工具找到这个IP是什么地方的。

  Mozilla/5.0+ 访问者使用的客户端浏览器版本

  compatible;+Baiduspider-cpro;++ 这个是百度的联盟的spider,这里也顺带着给大家提一下百度spider是什么,Baiduspider是百度搜索引擎的一个自动程序,它的作用是访问互联网上的网页,建立索引数据库,使用户能在百度搜索引擎中搜索到您网站上的网页,spider通常也被人们叫做搜索引擎蜘蛛。百度各个产品使用不同的user-agent:也代表着不同的用途,无线搜索Baiduspider 、图片搜索Baiduspider-image、视频搜索Baiduspider-video、新闻搜索Baiduspider-news、百度搜藏Baiduspider-favo、百度联盟Baiduspider-cpro、商务搜索Baiduspider-ads、网页以及其他搜索Baiduspider这也是网盟最喜欢看见的蜘蛛。

  200 是网站的返回码,证明蜘蛛在索引该页面的时候是正常可以访问的。

  通过以上对网站日志的解释相信大家对网盟分析网站日志有什么用应该找到了吧!分析网站日志能够使网盟清楚的了解网站现有的情况并作出调整,分析网站日志的时候我们也只需要注意几个常见的spider和网站访问时间、返回代码、响应速度这些就行了。

  以上就是百度网站蜘蛛日志分析的全过程,希望能帮到大家,谢谢阅读。请大家继续关注脚本之家。

更多精彩内容其他人还在看

神级营销! 网络营销哪家强,中国山东找蓝翔

中国山东找蓝翔,最近经常能听到这个口号,无论是生活、八卦、还是专业课里都是神般的存在感,下面我们来看看蓝翔营销抓的那些点,需要的朋友可以参考下
收藏 0 赞 0 分享

中小企业网站如何打造持续外链圈的策略

中小企业网站在外链建设方面同样也存在着较大的难度,因为这样的网站本身很难有更高的权重和排名,那么想要获得其他网站的青睐并与之合作就显得尤为困难,而且外链建设的主动权往往很难掌握到中小企业网站运营者的手中
收藏 0 赞 0 分享

从零流量到日均150UV 淘宝新手需知科学定位的重要意义

这篇文章主要为大家介绍了一位店长今年4月份开的淘宝到现在一天都发二三十个包裹的原因,据他描述淘宝店最核心一点就是关于定位的,只要定位好,卖东西没烦恼,需要的朋友可以参考下
收藏 0 赞 0 分享

你不露面谁知道你 浅析如何利用020营销让客户找到我们

有好的产品还要让人知道才可以销售,我们该如何利用020营销让客户找到我们呢?外链和软文应该是各位站长的第一反应,但是线上广告、社交宣传、赞助和合作同样也可以让用户准确的找到我们的产品,需要的朋友可以参考下
收藏 0 赞 0 分享

2014年淘宝天猫双11嘉年华活动营销玩法攻略详解

2014淘宝双十一网购狂欢节,淘宝1111天猫双11活动,双十一秒杀,淘宝商城双11活动,每年的11月11日淘宝商城“双十一”全场五折大促销活动。下面小编就为大家带来2014年淘宝天猫双11嘉年华活动玩法攻略详解,一起来看看吧
收藏 0 赞 0 分享

挖掘机哪家强? 解读蓝翔是如何将社会化营销做到极致

挖掘机哪家强,中国山东找蓝翔,这一具有洗脑性质的全国口号放佛在一瞬间家喻户晓。所以对于蓝翔这个出色的营销案例,我想还是有必要解读一下,或许对我们营销人员有所帮助呢
收藏 0 赞 0 分享

淘宝双11 中小卖家如何收获双十一(1)

双11以前只有淘宝才会搞的活动,现在电商都搞了,本文主要讲淘系的双十一,我们可以看到淘宝天猫平台是安排11月1号到10号做预热,11号为活动期。对于咱们大多数不能上会场的中小卖家,其实是可以借鉴其他平台的玩法,也跟着一块儿抢双十一的份额,需要的朋友可以参考下
收藏 0 赞 0 分享

淘宝双11卖家必看 中小卖家如何收获淘宝双十一(2)

这篇我们主要讲中小卖家进入十一月份之后我们要做哪些事情。在十一月份短短的10天里,我们其实要做很多的工作。下面我们一起来看看中小卖家具体要做什么
收藏 0 赞 0 分享

电商干货:电商无线端怎么优化?无线端优化全攻略

马上就要到双11了,在双11之前做好无线详情,必定为双11无线端的爆发打下坚实的基础。电商无线端怎么优化?下文主要讲了电商无线端优化全攻略,需要的朋友可以参考下
收藏 0 赞 0 分享

汽车营销案列 这样的创新营销,你买账吗?

营销对于品牌知名度提高的重要性不言而喻,但车企要找到适合自己的营销新方式并非易事。近期汽车营销事件中也存在一些“加分”和“减分”之举,接下来就带大家一同点评下近年来车企“砸钱虽易,营销不易”的创新性营销案例
收藏 0 赞 0 分享
查看更多