在seo优化过程中，网站收录问题是很多SEOer极为关注的一个问题。不仅要有收录，收录的网页还必须是重要页面，这里的重要页面指的是——未来能给你带来相关流量的页面。这就要求Seoer需要具备一定的网站日志分析能力。
 
什么是网站日志?
 
    网站日志，准确来说是服务器日志。通过服务器日志，我们可以了解到用户在什么IP、在什么分辨率的设备、什么时间、什么地区访问了我们的网站，以及当时访问的页面是否正常。
 
    对于我们网站而言，搜索引擎也是网站用户之一。本文提到的网站日志分析，更多是在分析搜索引擎这种用户。
 
在什么情况下需要做网站日志分析?
 
    1、老站点(建站1年且正常运营的网站)：Seo流量出现异常波动。
 
    2、刚建立不久的站点(建站6个月以下的网站)：定期分析。
 
分2种情况：
 
    了解外界：了解外界的前提在于平时你得有一定的人脉基础，如果没有也没关系。泡2个地方——去搜索引擎站长平台或者加入搜索引擎站长群。比如，像百度搜索引擎，它拥有站长平台，也会相应建立站长QQ群。
 
    有人脉基础上，可以直接了解外界的情况——是否也出现类似幅度的波动?这个的前提要结合你短期做过的SEO操作一并考虑，避免误判。
 
    无人脉的情况，泡群、泡站长平台。通常如果是搜索引擎算法升级，会在群里或者站长平台有相关的小道信息出现。
 
    如果是搜索引擎自身算法升级导致的流量波动，那么就得根据新算法做相应的站内优化。
 
    比如，百度冰桶3.0版本提出：将严厉打击在百度移动搜索中，打断用户完整搜索路径的调起行为。
 
    如果站点有存在以上的情况就需要针对性的做优化：无论是通过对接的APPlink调起，还是网页自主调起的应用，以及普通的网页，都应是可返回，可关闭的。用户校验搜索结果的准确性，不需要额外下载APP或者权限。
 
分析内在：在分析内在之前，再次抛出这个公式：
 
    Seo流量=抓取量*收录率(准确来说应该是索引率)*首页率*点击率 。当抓取频次、抓取时间出现异常必然引起抓取量的减少。
 
    因此，排除了外界的因素，就需要对网站的日志进行分析。如果你的站点是中文站点，且是百度站长平台的VIP用户。那么，你就可以先借助百度站长平台的“抓取频次”工具，先了解搜索引擎近期的抓取频次、抓取时间、异常页面。通常借助这个工具，我们可以对搜索引擎近期抓取情况有初步了解，并且可以借助这个工具，相应的找到一些解决办法。
 
在此先解释2个概念，方便理解：
 
    1.抓取频次：抓取频次是搜索引擎在单位时间内(天级)对网站服务器抓取的总次数，如果搜索引擎对站点的抓取频次过高，很有可能造成服务器不稳定，Baiduspider会根据网站内容更新频率和服务器压力等因素自动调整抓取频次。
 
    2.抓取时间：指的是搜索引擎每次抓取耗时。
 
步骤
 
    1、下载网站日志(如果是企业站点，可以直接让运维部门的童鞋帮忙下载，如果是个人站长，直接在你所购买的虚拟主机后台进行下载，文件以.log为结尾的便是)
 
    2、打开光年日志分析工具，上传网站日志。
 
查看分析结果。主要维度有这几个：
 
    (1)目录分析：各种爬虫抓取各目录的情况分析。通过这个可以了解到搜索引擎对一些重要栏目的抓取情况，又抓取了哪些无效的页面。
 
    (2)概况分析：各种爬虫的总抓取量、总停留时间、总访问次数。
 
    (3)状态码分析：主要分为2种，爬虫状态码以及用户状态码。主要反应用户/爬虫访问页面时的页面状态。通过页面状态码，我们可以了解到页面状态，做相应调整，如，当网站存在大量404页面。那就需要进一步排查，比如，有些团购页面，团购过期后，页面就直接变成404了，但并未向百度站长平台提交死链清单，则容易造成无效抓取。
 
    (4)页面分析：通过页面分析可以了解到经常被重复抓取的页面有哪些，可以相应的做优化调整。比如，像网站的一些注册页面及登录页面，经常会发现多次被抓取，发现这种情况，我们通常会将登录/注册页面进行屏蔽处理。