文章目录
[+]
光年seo日志剖析系统的拆分工具，可以很方便地进行自定义日志剖析。针对百度Spider的剖析，就把日志中username为BaiduSpider的记录全部提取出来进行剖析。还可以对拆分出来的百度spider抓取日志进行再次拆分，比如拆分出SPIDERTJGC 得到 404状态码的抓取记录或者Spider对基本类URL的抓取记录等。这样多次拆分就可以剖析出全体SPIDER对网站的抓取情形，以获取是否有不须要收录的内容被 Spider抓取，是否有自己没有创造的去世链接被 Spider创造，Spider对最新内容是否都有抓取，Spider对自己主推的栏目抓取是不正常，以及Spider对网站优化、目录或指定页面的抓取频率等数据。还可以针对状态码进行更详细的剖析，比如304是不是返回过多，以合营剖析网站各种页面的快照更新情形等。
同此此工具还可以对日志天生剖析报表，SEO日志剖析系统天生的日志剖析报表，这里是重庆小潘博客针对百度SPIDER抓取记录进行剖析天生的报表，此工具也可以直接对全体日志文件进行剖析，同时得出用户和SPIEDER 对网站的访问情形。如果不愿自己苦兮兮地打开日志逐行剖析，并且对日志剖析结果的哀求也不高，就可以利用此工具来赞助剖析，在这个报表中也可以剖析出不少问题。须要把稳的是，光年工具给出的日志剖析报表中Spider对网站优化的抓取次数，该当不是搜索引擎对网站真正的抓取次数，而是工具默认为在30分钟内没有连续抓取就算作离开了，即算作完成一次抓取。
©版权声明：
（图片来自网络侵删）
本站由 SEO小陈 【原创】
转载请保留原链接
https://www.seochen.com/wzyh/237.html
