當前位置:編程學習大全網 - 網絡軟體 - 怎麽從網站log日誌判斷百度蜘蛛來過

怎麽從網站log日誌判斷百度蜘蛛來過

那麽我們如何判斷百度蜘蛛來過呢?答案是要根據網站log日誌,如果百度蜘蛛來過那麽網站log日誌中會有相關記錄。壹個是百度蜘蛛名字 Baiduspider,壹個是百度蜘蛛ip,這兩點要綜合考慮才能正確分析,下面我們說說具體如何操作。

1、先確認log日誌對客戶端訪問機器名以及訪問ip進行了記錄。

如果沒有記錄這兩項就沒有Baiduspider字樣顯示,也沒有百度蜘蛛IP記錄。可以問下妳虛擬主機的空間商,如何設置日誌記錄蜘蛛蹤跡,如何下載下來日誌,客服會詳細告訴妳。

2、下載網站log日誌,可記事本打開文件,用查找 找 Baidu,字樣並記錄,各條數據IP。

因為有些站是仿百度蜘蛛來訪問妳的網站,他們名字也起的是Baiduspider,所以,為了避免被迷惑,我們還要根據IP進行反查,來確定這些IP對應的服務器名。下面是壹些log日誌中含Baiduspider的記錄:

123.125.71.26 - - [14/Feb/2014:01:03:29 +0800] "GET / HTTP/1.1" 200 10599 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +/search/spider.html)"

123.125.71.41 - - [14/Feb/2014:07:04:36 +0800] "GET / HTTP/1.1" 200 10599 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +/search/spider.html)"

220.181.108.117 - - [14/Feb/2014:01:03:49 +0800] "GET / HTTP/1.1" 200 10599 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +/search/spider.html)"

220.181.108.100 - - [14/Feb/2014:07:05:14 +0800] "GET / HTTP/1.1" 200 10599 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +/search/spider.html)"

117.28.255.53 - - [14/Feb/2014:08:30:11 +0800] "GET / HTTP/1.1" 200 4111 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +/search/spider.html)"

60.172.229.61 - - [14/Feb/2014:09:37:56 +0800] "GET / HTTP/1.1" 200 4123 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +/search/spider.html)"

3、點“開始” “運行” ?》 輸入cmd 點“確認” ?進入命令行模式,在命令行模式 輸入 nslookup 回車 進入反查操作。輸入妳記錄的百度蜘蛛ip 回車 看是否返回百度蜘蛛相關信息。如果返回就證明是百度蜘蛛;如果沒有,證明是其他站仿的百度蜘蛛。

  • 上一篇:浙江主要那些沿海城市
  • 下一篇:誰有意大利版《獅子王》壹二部完整版下載地址?~~
  • copyright 2024編程學習大全網