当前位置:首页 » 站长资讯 » 正文

点击去了解李勇SEO博客VIP干货群

SEO必备:网站日志分析

2016年4月15日 10:07:26  分类: 站长资讯  参与: 人  点这评论

作为一名seoer,对网站日志分析是必需要掌握的一项基本的技能,通过日志分析可以分析爬虫抓取页面有效性,通过日志分析蜘蛛返回的状态码能及时发现网站里面是否存在错误或者蜘蛛无法爬取的页面,排查网站页面中存在的404错误页面,500等这些噪音内容上噪音页面上(重复页面,低质量页面,空内容页面,404页面,不排名页面等)

SEO必备 网站日志分析

一、网站日志可以为我们做什么?

1、 可以分析爬虫抓取页面有效性(减少搜索引擎在一些噪音页面上:重复页面,低质量页面,空内容页面,404页面,不排名页面 的抓取频率);

2、排查网站页面中存在的404错误页面,500服务器错误等

3、页面重要内容是否被爬虫完整爬到并且快速遍历;

4、正确分辨蜘蛛爬虫

二、常见HTTP状态码解读

1、200代码,表示蜘蛛爬取正常

2、404代码,访问的这个链接是错误链接

3、301代码,永久重定向

4、302代码,表示临时重定向

5、304代码,客户端已经执行了GET,但文件未变化。

6、500代码,表示网站内部程序或服务器有错

接着,我列举一个网站日志的案例:

SEO必备 网站日志分析

日志里的含义,可以大家看下网站日志中各个数据都代表什么意思,总之这个文件是记录的一天发生在网站上的一些行为。当我们拿到这么一个网站日志,我们就可以审视我们的日志,并且通过对日志文件分析解决网站存在的问题;

三、日志代码解读

SEO必备 网站日志分析

从日志文件当中可以解读出两个部分内容:

1、搜索引擎抓取情况

SEO必备 网站日志分析

从日志文件中,可以大家看到搜索引擎抓取了一些404页面及低质量重负页面(噪音行为)

备注:可以通过nslookup ip 识别蜘蛛的真假

SEO必备 网站日志分析

/date-2016-01.html(低质量重负页面)

/author-1.html(低质量重负页面)

/downloads/(低质量页面)

/contact.html(死链接接),但这里有个问题,这个页面返回的状态码为200而不是404,但页面却跳转到404页面,从中可以发现服务器设置一定有问题;

所以,当我们有一些页面不希望他们抓取的时候,我们需要在robots中进行规范。规范robots一个重要的手段,就是robots.txt。爬虫纠偏,让爬虫花更多的精力放在我的详情页面上。

SEO必备 网站日志分析

2、用户访问网站情况

关于用户网站访问情况, 主要分析用户访问网站行为轨迹及用户属性,在这就不进行讲述。

来源:裕腾智工作室

更多相关推荐:

详细解读:网站SEO优化是什么意思?

网站内链在SEO优化中的作用及效果

网站tag对seo影响以及网站优化注意事项

网站的URL路径如何设置更利于SEO优化?

揭秘百度网站快速排名的SEO优化投票策略思维

来源:(微信/QQ:562511185),欢迎分享本文,转载请保留出处!

阅读更多:SEO优化  百度优化  网站优化    

投放广告点击这里去了解

  • 评论(0)
  • 赞助本站

赞助本站

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。

我要订阅 | 网站地图 | 百度地图 | 我要投稿 | 广告合作 |

Powered By Z-Blog2.2 李勇SEO博客 Copyright © 2014 合肥SEO保留所有权利 粤ICP备14092268号-1