SEO优化人员必学技能：如何看网站日志？很多做SEO的人员看到网站日志也是一头雾水，下面五谷老师就来谈谈关于网站日志该如何看呢？
网站日志是什么？
网站日志是记录web服务器接收处理请求以及运行时错误等各种原始信息的记录以.log结尾的文件。
如何下载日志？
通过FTP访问网站的根目录。可以看到一个包含log的文件夹，这是存放日志的地方。
SEO网站日志分析
网站日志有什么作用？
通过网站日志我们可以清楚的了解返问用户在什么IP、什么时间、用什么操作系统、什么浏览器、什么分辨率显示器的情况下访问了你网站的哪个页面，是否返问成功。
对于SEO工作者而言，网站日志可以分析记录各搜索引擎蜘蛛机器人爬行网站的详细情况，例如：哪个搜索引擎的蜘蛛机器人在哪天访问了网站多少次，返问了哪些页面，以及访问页面时返问的HTTP状态码。了解这些对网站在搜索引擎的爬行情况会有一个全面的认识，当然有利于我们SEO工作的计划调整与实施！
网站日志如何查看？
网站日志一般存放于虚拟主机的logfiles文件夹下，有些主机的日志文件存放的文件夹可能不太一样，但一般都是包含log这个词，具体文件夹可以咨询你的主机商或自己在主机目录下查找即可，找到日志文件后，我们可以通过FTP工具将网站日志下载下来，通过txt文档方式进行查看。
网站日志常见代码有哪些？
网站日志常见代码有许多，比如200、301、404等，想要一下子记住比较难而且没这个必要，在分析网站日志的过程中遇到不理解的代码可以直接查看，从而加强对网站日志代码所代表的含义的认识。
下面是网站日志一些比较常用的状态码：
200 - 服务器成功返回网页（成功获取网页信息）
404 - 请求的网页不存在
503 - 服务器超时
下面提供 HTTP 状态码的完整列表。点击链接可了解详情。您也可以访问 HTTP 状态码上的 W3C 页获取更多信息。
1xx(临时响应)
表示临时响应并需要请求者继续执行操作的状态码。
100(继续)请求者应当继续提出请求。服务器返回此代码表示已收到请求的第一部分，正在等待其余部分。
101(切换协议)请求者已要求服务器切换协议，服务器已确认并准备切换。
SEO网站log分析
2xx (成功)
表示成功处理了请求的状态码。
200(成功)服务器已成功处理了请求。通常，这表示服务器提供了请求的网页。如果是对您的robots.txt文件显示此状态码，则表示Googlebot已成功检索到该文件。
201(已创建)请求成功并且服务器创建了新的资源。
202(已接受)服务器已接受请求，但尚未处理。
203(非授权信息)服务器已成功处理了请求，但返回的信息可能来自另一来源。
204(无内容)服务器成功处理了请求，但没有返回任何内容。
205(重置内容)服务器成功处理了请求，但没有返回任何内容。与204响应不同，此响应要求请求者重置文档视图(例如，清除表单内容以输入新内容)。
206(部分内容)服务器成功处理了部分GET请求。
space
3xx(重定向)
要完成请求，需要进一步操作。通常，这些状态码用来重定向。Google建议您在每次请求中使用重定向不要超过5次。您可以使用网站管理员工具查看一下Googlebot在抓取重定向网页时是否遇到问题。诊断下的网络抓取页列出了由于重定向错误导致Googlebot无法抓取的网址。
300(多种选择)针对请求，服务器可执行多种操作。服务器可根据请求者(useragent)选择一项操作，或提供操作列表供请求者选择。
301(永久移动)请求的网页已永久移动到新位置。服务器返回此响应(对GET或HEAD请求的响应)时，会自动将请求者转到新位置。您应使用此代码告诉Googlebot某个网页或网站已永久移动到新位置。
302(临时移动)服务器目前从不同位置的网页响应请求，但请求者应继续使用原有位置来响应以后的请求。此代码与响应GET和HEAD请求的301代码类似，会自动将请求者转到不同的位置，但您不应使用此代码来告诉Googlebot某个网页或网站已经移动，因为Googlebot会继续抓取原有位置并编制索引。
303(查看其他位置)请求者应当对不同的位置使用单独的GET请求来检索响应时，服务器返回此代码。对于除HEAD之外的所有请求，服务器会自动转到其他位置。
304(未修改)自从上次请求后，请求的网页未修改过。服务器返回此响应时，不会返回网页内容。如果网页自请求者上次请求后再也没有更改过，您应将服务器配置为返回此响应(称为If-Modified-SinceHTTP标头)。服务器可以告诉搜索引擎的蜘蛛/机器人自从上次抓取后网页没有变更，进而节省带宽和开销。
305(使用代理)请求者只能使用代理访问请求的网页。如果服务器返回此响应，还表示请求者应使用代理。
307(临时重定向)服务器目前从不同位置的网页响应请求，但请求者应继续使用原有位置来响应以后的请求。此代码与响应GET和HEAD请求的301代码类似，会自动将请求者转到不同的位置，但您不应使用此代码来告诉Googlebot某个页面或网站已经移动，因为Googlebot会继续抓取原有位置并编制索引。
4xx(请求错误)
这类状态码表示请求可能出错，妨碍了服务器的处理。
400(错误请求)服务器不理解请求的语法。
401(未授权)请求要求身份验证。对于登录后请求的网页，服务器可能返回此响应。
403(禁止)服务器拒绝请求。如果您在Googlebot尝试抓取您网站上的有效网页时看到此状态码(您可以在Google网站管理员工具诊断下的网络抓取页面上看到此信息)，可能是您的服务器或主机拒绝了Googlebot访问。
404(未找到)服务器找不到请求的网页。例如，对于服务器上不存在的网页经常会返回此代码。
如果您的网站上没有robots.txt文件，而您在Google网站管理员工具"诊断"标签的robots.txt页上看到此状态码，则这是正确的状态码。但是，如果您有robots.txt文件而又看到此状态码，则说明您的robots.txt文件可能命名错误或位于错误的位置(该文件应当位于顶级域，名为robots.txt)。
如果对于Googlebot抓取的网址看到此状态码(在"诊断"标签的HTTP错误页面上)，则表示Googlebot跟随的可能是另一个页面的无效链接(是旧链接或输入有误的链接)。
405(方法禁用)禁用请求中指定的方法。
406(不接受)无法使用请求的内容特性响应请求的网页。
407(需要代理授权)此状态码与401(未授权)类似，但指定请求者应当授权使用代理。如果服务器返回此响应，还表示请求者应当使用代理。
408(请求超时)服务器等候请求时发生超时。
409(冲突)服务器在完成请求时发生冲突。服务器必须在响应中包含有关冲突的信息。服务器在响应与前一个请求相冲突的PUT请求时可能会返回此代码，以及两个请求的差异列表。
410(已删除)如果请求的资源已永久删除，服务器就会返回此响应。该代码与404(未找到)代码类似，但在资源以前存在而现在不存在的情况下，有时会用来替代404代码。如果资源已永久移动，您应使用301指定资源的新位置。
411(需要有效长度)服务器不接受不含有效内容长度标头字段的请求。
412(未满足前提条件)服务器未满足请求者在请求中设置的其中一个前提条件。
413(请求实体过大)服务器无法处理请求，因为请求实体过大，超出服务器的处理能力。
414(请求的URI过长)请求的URI(通常为网址)过长，服务器无法处理。
415(不支持的媒体类型)请求的格式不受请求页面的支持。
416(请求范围不符合要求)如果页面无法提供请求的范围，则服务器会返回此状态码。
417(未满足期望值)服务器未满足"期望"请求标头字段的要求。
网站日志log分析
5xx(服务器错误)
这类状态码表示服务器在处理请求时发生内部错误。这些错误可能是服务器本身的错误，而不是请求出错。
500(服务器内部错误)服务器遇到错误，无法完成请求。
501(尚未实施)服务器不具备完成请求的功能。例如，服务器无法识别请求方法时可能会返回此代码。
502(错误网关)服务器作为网关或代理，从上游服务器收到无效响应。
503(服务不可用)服务器目前无法使用(由于超载或停机维护)。通常，这只是暂时状态。
504(网关超时)服务器作为网关或代理，但是没有及时从上游服务器收到请求。
505(HTTP版本不受支持)服务器不支持请求中所用的HTTP协议版本。
网站日志有什么规则：
引擎有不同IP段的抓取蜘蛛：
1、不同内容的抓取蜘蛛
2、权重页的抓取蜘蛛、低权重页的抓取蜘蛛
3、不同页面的抓取蜘蛛
4、对新站的抓取蜘蛛
5、将要K站的、进沙盒的抓取蜘蛛
7、高频率（每天更新）的抓取蜘蛛
8、新站点或出现异常的站点蜘蛛
9、不间断巡逻的蜘蛛210.72.225.*（它是我们通常理解的引擎蜘蛛抓取网站的情况，我以前总以为百度就有一人蜘蛛，每天
不停的进出各种网站，其实，这只是一个常运转的程序）
10、用户的访问IP
还包括了进入网站的位置、以及用户搜索时网站被展现且用户点击进入、以及在搜索图片时的进入位置。进入时间、
等等（下文详解，这里主要阐述不同IP对网站有不同意义，不仅仅要看301、200、304、404等因为，日志的信息量很大）
如果我们知道这以上内容，甚至更多时，我们就可以通过日志，来知道：引擎只派123.125.71.*来处理低权重的网页。常常这个
IP段的蜘蛛访问后会返回304。304是指网页没有变化。哪么，是不是通过这一点，我们知道了两个问题：第一要更新这个网页
。第二这个网页权重不高，要做内外锚文本？（注意每一条日志里除了对首页的抓取外，都明确的记录了对哪一页的返回信息）
等等IP段的蜘蛛和返回码，以及记录的被访问的网页，这有助于我们更善网页。日志就是这么用的。
不同IP段蜘蛛的含意一：
121.14.89.*这个ip段作为度过新站考察期。
123.125.68.*这个蜘蛛经常来,别的来的少,表示网站可能要进入沙盒了，或被者降权。
220.181.7.*123.125.66.*代表百度蜘蛛IP造访，准备抓取你东西。
220.181.68.*每天这个IP段只增不减很有可能进沙盒或K站。
203.208.60.*这个ip段出现在新站及站点有不正常现象后。
210.72.225.*这个ip段不间断巡逻各站。
二：
123.125.71.*抓取内页收录的，权重较低，爬过此段的内页文章不会很快放出来，因不是原创或采集文章
三：
125.90.88.*广东茂名市电信也属于百度蜘蛛IP主要造成成分，是新上线站较多，还有使用过站长工具，或SEO综合检测造成的。
space
四：
220.181段属于权重IP段此段爬过的文章或首页基本24小时放出来。
220.181.108.75重点抓取更新文章的内页达到90%，8%抓取首页，2%其他。权重IP段，爬过的文章或首页基本24小时放出来。
220.181.108.77专用抓首页IP权重段，一般返回代码是30400代表未更新。
220.181.108.80专用抓取首页IP权重段，一般返回代码是30400代表未更新。
220.181.108.83专用抓取首页IP权重段，一般返回代码是30400代表未更新。
220.181.108.86专用抓取首页IP权重段，一般返回代码是30400代表未更新。
220.181.108.89专用抓取首页IP权重段，一般返回代码是30400代表未更新。
220.181.108.91属于综合的，主要抓取首页和内页或其他，属于权重IP段，爬过的文章或首页基本24小时放出来。
220.181.108.92同上98%抓取首页，可能还会抓取其他(不是指内页)
220.181.108.94专用抓取首页IP权重段，一般返回代码是30400代表未更新。
220.181.108.95这个是百度抓取首页的专用IP，如是220.181.108段的话，基本来说你的网站会天天隔夜快照
220.181.108.97专用抓取首页IP权重段，一般返回代码是30400代表未更新。
五：
注===以上IP尾数还有很多，但段位一样的123.125.71.*段IP代表抓取内页收录的权重比较低.可能由于你采集文章或拼文章暂时被收录但不放出来.(意思也就是说待定)。
220.181.108.*段IP主要是抓取首页占80%，内页占30%，这此爬过的文章或首页。
space
关于网站日志给大家来举个栗子拉：
118.123.10.130--[05/May/2019:01:05:35+0800]GET/about.htmlHTTP/1.1"20073070"-""Mozilla/4.0(compatible;MSIE5.0;WindowsNT;DigExt;DTSAgent"107.175.1.92
日志分析：
118.123.10.130（表示客户端IP地址）--[05/May/2019:01:05:35+0800]"访问时间及服务器所在时区
GET/数据包提交方式为GET方式。常见的有GET和POST两种类型。
about.html客户端访问的URL
HTTP/1.1"协议版本信息
200WEB服务器响应的状态码。404表示服务器上无此文件；200表示响应正常；500表示服务器错误。
73070此次访问传输的字节数
"-""Mozilla/4.0(compatible;MSIE5.0;WindowsNT;DigExt;DTSAgent"107.175.1.92
客户端浏览器和系统环境等信息。
118.123.10.155--[05/May/2019:01:09:12+0800]"GET/wp-login.phpHTTP/1.1"200105635"-""Mozilla/5.0(WindowsNT6.1;WOW64;rv:40.0)Gecko/20100101Firefox/40.1"49.206.4.165
118.123.10.155--[05/May/2019:01:09:16+0800]"GET/HTTP/1.1"200105715"-""Mozilla/5.0(WindowsNT6.1;WOW64;rv:40.0)Gecko/20100101Firefox/40.1"49.206.4.165
118.123.10.130--[05/May/2019:01:13:27+0800]"GET/new/30?page=1HTTP/1.1"20025864"-""Mozilla/5.0(WindowsNT6.1;Win64;x64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/69.0.3497.81YisouSpider/5.0Safari/537.36"42.120.161.21
118.123.10.170--[05/May/2019:01:13:28+0800]"GET/public/home/web/css/base.cssHTTP/1.1"2005603"http://wzfshb.com/new/30?page=1""Mozilla/5.0(WindowsNT6.1;Win64;x64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/69.0.3497.81YisouSpider/5.0Safari/537.36"42.156.137.21
118.123.10.130--[05/May/2019:01:13:29+0800]"GET/public/home/web/css/web.cssHTTP/1.1"20033250"http://wzfshb.com/new/30?page=1""Mozilla/5.0(WindowsNT6.1;Win64;x64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/69.0.3497.81YisouSpider/5.0Safari/537.36"42.120.161.21
118.123.10.170--[05/May/2019:01:13:29+0800]"GET/public/home/web/js/banner/css/banner1.cssHTTP/1.1"2001794"http://wzfshb.com/new/30?page=1""Mozilla/5.0(WindowsNT6.1;Win64;x64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/69.0.3497.81YisouSpider/5.0Safari/537.36"42.156.137.21
118.123.10.130--[05/May/2019:01:13:29+0800]"GET/public/home/web/css/lory.cssHTTP/1.1"2005098"http://wzfshb.com/new/30?page=1""Mozilla/5.0(WindowsNT6.1;Win64;x64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/69.0.3497.81YisouSpider/5.0Safari/537.36"42.120.161.21
118.123.10.130--[05/May/2019:01:13:29+0800]"GET/public/template/hint/css/jquery.toast.cssHTTP/1.1"2005146"http://wzfshb.com/new/30?page=1""Mozilla/5.0(WindowsNT6.1;Win64;x64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/69.0.3497.81YisouSpider/5.0Safari/537.36"42.120.161.21
网站日志log分析
附:网站日志分析工具：www.loghao.com这个工具还是蛮好用的。
网站URL:必须以“http://”开头，结尾不带“/”
http://你的域名
示例日志:自动提取，可手动粘贴一行标准日志换一行
User-agent:googlebot-mobile
日志文件:直接选择log、txt日志文件
选择文件
网站日志:*可手动粘贴到下面日志框内清空/手动粘贴
分析出来的结果会很详细的，方便优化人员对网站进行改进
Baiduspider蜘蛛(14)|Googlebot蜘蛛(17)|Sogou蜘蛛(0)|Yahoo蜘蛛(0)|360Spider蜘蛛(0)|123.125.68沙盒(0)|220.181.68沙盒(0)|220.181.7预备抓取(0)|123.125.66预备抓取(0)|121.14.89新站考察(0)|203.208.60网站异常(16)|210.72.225巡逻(0)|123.125.71.106低权重(0)|123.125.71.95低权重(0)|123.125.71.97低权重(0)|123.125.71.117低权重(0)|123.125.71低权重汇总(4)|220.181.108.95隔日快照(0)|220.181.108.92权重抓取(0)|220.181.108.91综合权重(0)|220.181.108.75内页权重(0)|220.181.108.86权重首页(0)|220.181.108.89权重首页(0)|220.181.108.94权重首页(0)|220.181.108.97权重首页(0)|220.181.108.80权重首页(0)|220.181.108.77权重首页(0)|220.181.108.83权重首页(0)|220.181.108权重蜘蛛汇总(0)|数据存档查看历史数据
