手工分析日志都是比较干燥的，有时会影响心境，不外现在工具繁盛的年代，我们也借助工具来到达事半功倍。
然后在你需要测试的页面中，把下面的代码片段复制到你网站相应的html中即可，
3， 特别情况的蜘蛛
网站访问日志是记载web服务器接受处置恳求以及运行时过错等各种原始信息的以.log结尾的文件，确实的讲，应当是服务器日志。它的作用是让我们seoer可以明白的得悉用户在什么IP、什么时光、用什么操作体系、什么阅读器、什么辨别率显示器的情况下访问了你网站的哪个页面，是否访问胜利。
1) cdn加速后，造成ip凌乱。
注意：对虚实蜘蛛的分辨必定要多方面斟酌，切勿只拿ip来断定就判断真伪。
一、多元测试谷歌网站优化如何实现
曾记得在几年前，笔者刚接触seo的时候，工具稀疏的年代，笔记一直都喜欢手工
原创文章起源： 转载请保存有效的链接地址，谢谢!
2-3点爬行3次
为什么会涌现真假蜘蛛，重要是因为当初信息繁盛，很多采集工具为不让对方发现本人的痕迹都模仿蜘蛛的痕迹来下载数据源。所以会造成很多seoer误认为蜘蛛大批的抓取页面却发现收录并未增添的景象。下面笔者告知大家比较轻易识别真假蜘蛛和一些特别注意的处所。
注意：任何蜘蛛都仅仅为网站的一般用户。不要认为蜘蛛十分的强盛，很多人还认为网站若制止登录查看内容，蜘蛛都能爬取登陆后的页面内容，这是不可能的。除非网站做了蜘蛛专属手腕。
2) 百度匿名蜘蛛的存在性讨论。
笔者会把每日的蜘蛛访问时间按时间段排序统计成报表，
最后以上就是笔者最近在剖析所服务的网站 ---小苏，跟我接洽，一起探讨!三人行必有我师，独特提高!
3-4点匍匐10次
第二种：可能是百度的上班族们在公司访问了你的网站，百度员工也是人，他们也有七情六欲，或者你的网站被他们某人发明了，访问了你的网站后，从而留下了百度ip，造成了曲解。(其实百度很多部门都是一直在做收集客户资料的，好比网盟部分)
鉴于技术有限，这项功能的实现还有待进一步的扩大和研究，然而笔者信任，对于seo优化而言，谷歌网站优化工具的这项讲演功能将会助力seo,网页制作报价。
什么是访问日志
比如：2012-4-18 1-2点爬行5次
25269 为页面字节数。
Sogou web spider/4.0(+ 为搜狗蜘蛛特征。
此类情况出现一般是网站在做了cdn加速后，再去查看apache服务器的访问日志的时候发现很多蜘蛛的痕迹ip都异常的相似，如果依照百度官方出的鉴别伎俩nslookup ip 后确定为匿名，因为这些ip都是cdn节点ip，所以会造成误会。若开启cdn后，蜘蛛实际访问次数一般都<=日志中蜘蛛总数值。
如果你仔细的话可以做个走势图就无比直观。这种统计正常都是在网站刚树立后和网站出异常后增强分析日志，日常经营中，更多重视的是分析出蜘蛛逐日的爬行法则而后定时的放出充量文章，增长收录。
下面是从笔者日常分析的日志中取的一条访问记载：
1、上风：便利测试各种seo优化数据;简单的操作和技术实现便于操作。
近期笔者对大概50多位刚从事或已经从事1-2年的seoer做了个小考察，其中包括很多口试者，真正在工作中能分析到日志的seoer比例非常非常的少，在问到访问日志在seo所起到的作用，很多seoer都直摇头，或者仅仅知道一些皮毛并未亲手操作过，其主要起因仍是在公司平台中并未有机遇去实际，下面笔者分享下自己对网站原始访问日志的意识：
第一种：如果真的存在匿名蜘蛛，这很显明与lee的话有悖。所以这点我们可以去辩证的去懂得，如果存在，匿名蜘蛛会做什么，许多seoer包含笔者都猜想可能会存在用此类蜘蛛去验证网站是否对蜘蛛与用户做了不同的待遇。所以此种情况，做贼就不要心虚嘛，老诚实实做站吧。
GET /bbjk/index.html HTTP/1.0 根据HTTP/1.1 协定 抓取(域名下)/bbjk/index.html 这个页面(GET表现服务器动作)
220.181.108.96 - - [07/Apr/2012:01:22:21 +0800] "GET /site/sex/index.php HTTP/1.1" 302 20 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +
不论哪个网站，即便seo优化技巧很完善，甚至浑然一体，但总会存在毛病跟不足，所以及时有效的对网站进行诊断是seo优化工作者不可缺乏的内容之一，抉择一个谷歌网站优化工具可以从多方面晓得网站优化的各项功效，它可以辅助你实现，想要测试的内容。
这是笔者某网站的日志片断，我拿出ip，在win系统下cmd登录dos框下输入nslookup 220.181.108.96 查看回显：
10/Apr/2012:00:04:54 +0800 为访问日期 -时区
笔者比较推举的是光年日志分析工具。该工具非常简单，笔者不在此演示，有兴趣的自己百度，它的长处在于能在生成的呈文中清楚的告诉我们蜘蛛爬行异常，与页面抓取痕迹。比如404. 独一遗憾的是目前笔者还未找到一款工具带有分析蜘蛛爬行规律天生走势图的工具。
假蜘蛛比较经典的就是chinaz的查问工具了，他就是模拟百度蜘蛛的，他的ip为125.90.88.96 我们反查后并未出现百度域名。有兴致的可以nslookup 125.90.88.96下，笔者就不截图了。
怎么去分析网站访问日志
2， 假蜘蛛
首先，选定测试目的，可以取舍你想要测试的页面，可以挑选某个页面中的某个页面片段，或是您的优化团队需要重点优化的页面局部，也可以是辨认您的转换/成功/目标页，只有是你所需要设定的页面，任何一个都可以。
看着跟真的一样，唯独ip就是猫腻！
200 服务器响应状态码
什么时候咱们须要去分析日志及日志特点
笔者现在手工分析一般都集中在研讨每日蜘蛛在网站上爬行规律与网站更新数据之间的关联。当然每个网站需依据自己来视察，最后会有一个非常完美的规律。
119.254.22.200 - - [10/Apr/2012:00:04:54 +0800] "GET /bbjk/index.html HTTP/1.0" 200 25269 "-" "Sogou web spider/4.0(+
真假蜘蛛辨别
如上图，若是百度蜘蛛，他会直接回显百度的域名。
3、只能跟踪一个转换点，如果你想跟踪多个转换点，你可以针对每个转换点进行标志。
1， 真蜘蛛
二、多元测试谷歌网站优化利弊衡量
去分析拜访日志，当然手工分析很费时费劲，再这里只讲授下笔者最爱好手工分析日志中的多少点。
匿名蜘蛛？百度工程师lee始终强调百度蜘蛛是不会匿名去访问网站的，但笔者从网上查阅材料，加上笔者某个站的数据揣测，笔者以为会有两种情形:
我们会每天都去分析日志吗?不会的，由于日志分析比较单调，个别都是每月或者半月分析一次,成都网页设计。这种分析属于日常分析，假如你的网站一直都比拟畸形那可以每月分析一次，或者能够简略的分析一次。
119.254.22.200 为用户访问ip
实在日志更多是在网站呈现异样的时候，会察看半个月日志，集中分析蜘蛛的动向。比方会分析是不是网站404，robots设置异常或者挂马等问题造成蜘蛛消散，逐儿去查找解决问题。
2、缺陷：无奈把持流量变更之间数据测试;不能重置数据，如果想从新取得输入一些新的数据内容，必需重新设置这些字段，开端一个新的记录(倡议在重新开始新的内容之前，把之前的数据做一个记录，以保障全部优化进程数据的完全性)
留神：在日志分析中，良多时候我们都是想从日志中寻找到问题，以便改良我们的本身的问题，所以需要特殊关注404,301等状况码。
普通假蜘蛛的存在情势为：XXX.XXX.XXX.XXX - - [07/Apr/2012:01:22:21 +0800] "GET /site/sex/index.php HTTP/1.1" 302 20 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +