详细罗列出各个搜索引擎蜘蛛日志及服务器常见状态码含义

其实我们做seo网站优化通常是一个无所不能的位置因为有太多的因素影响排名做优化的时候比如我们今天要谈的话题网站权重传递比如我们今天要谈的话题如果日志的分析不分析蜘蛛你可以吗?t理解蜘蛛。如果有问题在优化过程中很可能在不知情的情况下这个想法是错误的。

IIS日志的目的是观察搜索引擎蜘蛛的爬行情况来我们的网站并分析和蜘蛛更紧密的联系。爬行爬行的时间点高峰时期的爬行爬行的HTTP状态代码反映给我们清晰的分析方便。

1。主要的搜索引擎的蜘蛛名称:

百度爬虫名称(Baiduspider)

谷歌爬虫名称(广告)

雅虎(Yahoo)爬虫名称(YahooSlurp)

有道(有道)蜘蛛名称(YodaoBot)

搜狗蜘蛛名称(sogouspider)

MSN蜘蛛名称:msnbot

2。IIS分析:

情况日志:61.135.168.22——[11日/ 1月/ 2009:04:02:45 + 0800]“GET /线程- 7303 - 1 - 1. htmlhttp / 1.1”2008450”——““Baiduspider (+ http: -www-baidu-com /搜索/ spider.htm)“

分析?

161.135.168.22是这是谁的服务器IP访问网站。

211日/ 1月/ 2009:04:02:45意味着蜘蛛爬行时间

3得到/线程- 7303 - 1 - 1。htmlHTTP这意味着蜘蛛抓取这个页面。

4。200状态代码表明蜘蛛抓取页面成功;404年表明蜘蛛无法抓取页面。

8450意味着8450字节被抓获这一次

6Baiduspider (+ http: -www-baidu-com /搜索/ spider.htm)意味着百度蜘蛛的名字

3。基本状态码:

200:请求已经完成和蜘蛛访问的页面通常

301:移动永久重定向

302:临时重定向

304:蜘蛛爬行后发现兴仁县SEO永久重定向

302:临时重定向

304:蜘蛛爬行后发现页面没有被修改

305:使用代理

400:请求错误

404:页面没有找到

第四详细的IIS状态代码的含义:

100 -这意味着请求已经收到其余的一部分发送。

101 -移交协议。

2 xx-success服务器成功接受客户端请求。(只要是2 xx状态这意味着成功)

200 -好吧。客户端请求已经成功。

201年创建。

202 -接受。

203 -未知的信息。

204 -没有内容。

205 -重置内容。

206 -的一部分内容。

300 -响应接收到的请求服务器可以执行不同的操作。

301 -永久移动和转移请求的内容被永久地搬到了另一个新位置。

302 -临时移动传输请求的内容已经暂时搬到一个新的位置

304 -修改的。请求的内容没有被修改自上次请求。

307 -临时重定向。从不同的位置目前服务器响应请求但请求者应该继续使用原来的位置为未来的请求。

400 -错误的请求。

401 -访问被拒绝。IIS定义了许多不同的401错误指出错误的更具体的原因。这些特定的错误代码显示在浏览器中但不是在IIS日志:

401.1登录失败。由于服务器配置

401.2登录失败。

401.3授权由于ACL对资源的限制。

401.4过滤授权失败。

401.5 isapi / CGI应用程序授权失败。

401.7访问被拒绝的URL授权策略在web服务器上。致力于IIS6.0这个错误代码。

403 -禁止访问:IIS定义了许多不同的403错误这表明更具体的错误原因:

403.1执行禁止访问。

403.2(指禁止访问。

403.3写访问是被禁止的。

403.4需要ssl。

403.5 -ssl128必需的。

403.6 ip地址被拒绝。

403.7客户端证书要求。

403.8网站访问被拒绝。

403.9——许多用户。

403.10——配置是无效的。

403.11密码改变。

403.12访问映射表是否认。

403.13——客户端证书被撤销。

403.14拒绝目录列表。

403.15客户机访问权限超过。

403.16——客户端证书不可信或无效。

403.17——客户端证书已过期或还没有有效的。

403.18——请求的URL无法在当前执行的应用程序池。致力于IIS6.0这个错误代码。

403.19不能执行CGI为客户在这个应用程序池。致力于IIS6.0这个错误代码。

403.20护照登录失败。致力于IIS6.0这个错误代码。

404 -未找到所请求的内容。

404.0 -未找到文件或目录。

404.1——网站无法访问所请求的端口。

404.2—网服务扩展停摆政策阻止了这个请求。

404.3 mime映射政策阻止了这个请求。