google蜘蛛： googlebot
bd蜘蛛：baiduspider
yahoo蜘蛛：slurp
soso蜘蛛：sosospider
msn蜘蛛：msnbot
有道蜘蛛：YodaoBot和OutfoxBot
搜狗蜘蛛：sougouspider
下面我來解釋下這段代碼：
1、2010-11-15 18:18:10 是bd蜘蛛來的日期和時間。
2、 GET /post/5.html是bd蜘蛛訪問的頁面 get表示獲取的意思。
3、80是端口
4、220.181.108.166是bd蜘蛛的ip地址
5、Baiduspider+(+/search/spider.htm)就是指bd蜘蛛了
7、200表示抓取成功，這是bd蜘蛛爬行後返回的代碼。
另外還有壹些其他的代碼：
2xx 成功
200 正常;請求已完成。
201 正常;緊接 POST 命令。
202 正常;已接受用於處理，但處理尚未完成。
203 正常;部分信息 — 返回的信息只是壹部分。
204 正常;無響應 — 已接收請求，但不存在要回送的信息。
3xx 重定向
301 已移動 — 請求的數據具有新的位置且更改是永久的。
302 已找到 — 請求的數據臨時具有不同 URI。
303 請參閱其它 — 可在另壹 URI 下找到對請求的響應，且應使用 GET 方法檢索此響應。
304 未修改 — 未按預期修改文檔。
305 使用代理 — 必須通過位置字段中提供的代理來訪問請求的資源。
306 未使用 — 不再使用;保留此代碼以便將來使用。
4xx 客戶機中出現的錯誤
400 錯誤請求 — 請求中有語法問題，或不能滿足請求。
401 未授權 — 未授權客戶機訪問數據。
402 需要付款 — 表示計費系統已有效。
403 禁止 — 即使有授權也不需要訪問。
404 找不到 — 服務器找不到給定的資源;文檔不存在。
407 代理認證請求 — 客戶機首先必須使用代理認證自身。
410 請求的網頁不存在(永久);
415 介質類型不受支持 — 服務器拒絕服務請求，因為不支持請求實體的格式。
5xx 服務器中出現的錯誤
500 內部錯誤 — 因為意外情況，服務器不能完成請求。
501 未執行 — 服務器不支持請求的工具。
502 錯誤網關 — 服務器接收到來自上遊服務器的無效響應。
503 無法獲得服務 — 由於臨時過載或維護，服務器無法處理請求。