网站日志分析前必知：什么是网站日志及何时做分析？

某O2O互联网公司SEO经理

在做网站日志分析之前，得先弄明白：

1.什么是网站日志？

2.在什么情况下需要做网站日志分析？

什么是网站日志？

网站记录，确切地讲，是指服务器的记录。借助这些记录，我们能够得知用户是通过哪个IP地址、在何种分辨率的设备上、在何时何地访问了我们的网站，并且能够判断他们访问的页面是否运行正常。

对于我们的网站平台来说，搜索引擎构成了用户群体的一部分。在本文所探讨的网站日志分析过程中，主要关注的是搜索引擎这一类用户。

在什么情况下需要做网站日志分析？

老旧站点（那些已运营一年且运行稳定的网站）：其SEO流量出现了不寻常的波动现象。

2、刚建立不久的站点（建站6个月以下的网站）：定期分析。

了解以上两种情况后，我们如何进行网站日志分析？

针对老站点网站日志分析

从事SEO工作的人必须定期进行数据调研。他们需要掌握网站SEO流量的变化趋势。一旦发现网站SEO流量波动超过10%，就必须进行更深入的探究。

分2种情况：

要了解外部世界，首先你得在日常生活中建立起一定的人脉网络，即便没有这样的基础也不要紧。你可以尝试泡两个地方——要么访问搜索引擎的站长平台，要么加入相应的搜索引擎站长QQ群。以百度搜索引擎为例，它不仅设有站长平台，还建立了相应的QQ群。

在拥有丰富人脉的情况下，可以迅速掌握外部动态——例如，是否出现了同等程度的波动？对此，需将你近期执行的SEO策略一并纳入考量范围，以防止做出错误的判断。

若缺乏人脉资源，便需加入各类社群、积极浏览站长平台。通常情况下，一旦搜索引擎的算法发生更新，群内或站长平台上便会流传着一些关于此的信息。

若流量波动是由搜索引擎算法的更新所引起，则需依照新算法进行相应的网站内部调整。

百度冰桶3.0版本明确指出，将采取严格措施，对在百度移动搜索过程中，那些干扰用户完整搜索流程的调起行为进行严厉打击。

若站点存在上述问题，便需采取相应措施进行改进：不论是依托APPLINK接口启动的应用，还是用户自行在网页上启动的应用，亦或是常规网页，均需支持返回和关闭功能。用户在验证搜索结果准确性时，无需额外下载应用程序或授予额外权限。

分析内在：在分析内在之前，再次抛出这个公式：

SEO流量等于抓取次数乘以收录比（确切地讲，是索引比）再乘以首页占比以及点击率。一旦抓取频率或抓取时间出现异常，必然会导致抓取次数的降低。

故此，在排除外界干扰之后，我们必须对网站日志进行深入剖析。特别是，若您的网站为中文版，并且您是百度站长平台的VIP会员，那么您完全可以通过百度站长平台的“抓取频次”功能，首先掌握搜索引擎近期对网站的抓取频率、具体抓取时间以及存在的异常页面信息。通常通过使用这一工具，我们能够对搜索引擎近期抓取的数据有一个基本的认识，同时，借助这个工具，我们还能发现并探索一些相应的解决方案。

在此先解释2个概念，方便理解：

抓取频次指的是搜索引擎在特定时间段内（如每日）对网站服务器进行的总抓取量。若搜索引擎对某站点的抓取频次偏高，可能会导致服务器运行不稳定。在这种情况下，Baiduspider会依据网站内容的更新速度以及服务器承受的压力等因素，自动对抓取频次进行调整。

2.抓取时间：指的是搜索引擎每次抓取耗时。

影响抓取频次的可能原因

抓取频次上限若被错误调整，一旦降低，将直接导致抓取量减少；抓取量减少，进而使得索引量减少，随之而来的是流量也会相应减少。

在运营方面，我们发现存在众多重复的页面现象——一方面，可能是我们自己的网站内容存在大量重复；另一方面，也可能是我们网站的内容大量采集了互联网上已经存在的信息。从搜索引擎的角度来看，它们的目标是抓取更多更优质的页面，然而，我们的网站却提供了大量充斥网络的内容，这无疑是对资源的浪费。此外，我们还发现网站内容更新不及时。建议，通过有规律定期产出优质内容来解决此问题。

抓取所需时间延长，这同样会引起网站抓取数量的下降。常见的原因之一是服务器响应速度减慢，进而延长了抓取所需的时间。此外，还有可能与网站的结构设计有关。若网站结构层级过深，也会造成影响。

小结一下老站如何做网站日志分析（针对中文站点）：

外界需关注：核实搜索引擎的最新算法是否出现了调整，同时留意行业内的其他搜索引擎是否也经历了相似的改变。

深入剖析：首先，运用百度站长平台这一工具进行操作（对于非VIP账户的用户，请参阅下文相关说明）。

分析手段：主要依赖频次抓取工具展开细致分析，涵盖网站频次抓取、时间节点、异常页面状况等数据波动，同时积极与相关部门沟通协作，寻求问题解决方案。

针对新站点如何做网站日志分析

对新站点的网站日志进行深入分析，其核心目标是探讨如何有效推动新站点在搜索引擎中的索引速度，并实现一定程度的排名提升。新站点在成立初期，往往需要经历一个被称为沙盒期的阶段。沙盒期相当于搜索引擎对新站进行的一种资格评估过程。在此期间，我们将其定义为沙盒期，通常这一阶段会持续2至6个月。进入沙盒阶段并不意味着该站点不会被搜索引擎收录，只是因为新建立的站点权重不高，内容相对较少，所以其被收录的量也不会很大。

在初期阶段，我们针对新站点的网站日志进行了深入分析，目的是确认站点是否曾被爬虫检索过。若未曾，一方面，我们需确保站点持续发布高质量内容；另一方面，在站点建设相对成熟后，我们应主动向搜索引擎提交链接，以便爬虫能够识别并访问我们的站点。此外，我们还可以通过正当途径交换一些高质量的友情链接，以此吸引爬虫对站点进行抓取。

新站点在建立初期往往难以获取百度站长平台的VIP账号，但通过分析网站日志，我们可以利用光年日志分析工具进行深入探究。

步骤

请下载网站日志文件，若为企事业单位网站，可请运维同事协助获取；若为个人网站，则可在所购虚拟主机管理后台直接操作，下载以.log结尾的文件即可。

2、打开光年日志分析工具，上传网站日志。

3、查看分析结果。主要维度有这几个：

总体概述：对各类爬虫的抓取总量、停留时长以及访问频次进行综合分析。

目录剖析：不同爬虫对各个目录的抓取状况进行详尽分析。据此，我们可以掌握搜索引擎对于关键栏目的抓取成效，以及哪些无效页面也被纳入了抓取范围。

页面分析有助于识别哪些页面频繁被检索，据此可进行相应的优化调整。例如，网站的注册页和登录页往往会被多次检索，一旦发现这一现象，我们通常会对这些登录/注册页面实施屏蔽。

状态码的解析主要涉及两大类：一是爬虫的状态码，二是用户的状态码。这两类状态码主要反映了用户或爬虫在访问网页时遇到的页面具体情况。借助这些页面状态码，我们能够掌握页面的实际状态，并据此作出相应的调整。例如，当网站中存在大量的404错误页面时。这就意味着必须进行更深入的检查，例如，某些团购网页在活动结束后，页面会直接显示404错误，然而并未向百度网站管理员平台报送断链列表，这样便可能引发无效的抓取行为。

小结一下，新站网站日志分析：

新站日志分析的目标在于：查明爬虫是否进行了抓取行为，以推动内容的收录；同时，对无效的抓取进行屏蔽。

2.分析工具：光年日志分析工具。

总结

在网站SEO流量出现异常时，我们首先应排除外部干扰，然后对网站日志进行深入分析，以查明爬虫抓取活动是否出现了不正常的现象。

若您持有百度站长平台的VIP身份，便可在该平台上选用抓取频次工具进行日志分析；若非VIP用户，则推荐您下载光年日志分析工具以进行数据解析。

为了高效执行SEO任务，需熟练掌握网站日志解析技巧，这有助于优化站内内容。网站日志解析的重要性体现在：它能迅速识别爬虫抓取过程中的异常状况，进行相应的调整，确保更多高质量页面被爬虫收录。此外，通过网站日志分析，我们还能有效屏蔽无价值页面，优化站内链接布局，从而使网站既赢得用户喜爱，又吸引搜索引擎爬虫关注，这对提升SEO流量大有裨益。

作者介绍：艾米，笔名奔跑的艾米，拥有5年SEO实战经验。她目前供职于一家O2O互联网企业，担任SEO经理一职。如需转载本文，请务必注明九枝兰微信ID：jiuzhilan，或扫描二维码。对于未注明作者姓名的转载行为，九枝兰保留依法追究法律责任的权利。