真正意義上的網(wǎng)站分析是從服務(wù)器日志開始的，而且直到今天，分析服務(wù)器（也稱為server log file，或簡稱log file）日志仍然是網(wǎng)站分析的重要方法。

很多站長可能都知道網(wǎng)站LOG日志很重要，可能是因?yàn)槊苊苈槁榈淖址屓吮容^頭疼，所以很多人僅僅是知道，而沒有去深究，殊不知網(wǎng)站LOG日志能為我們做SEO提供非常大的幫助！下面我就再啰嗦一下網(wǎng)站LOG日志。

網(wǎng)站LOG日志是記錄web服務(wù)器接收處理請求以及運(yùn)行時錯誤等各種原始信息的以（·log）結(jié)尾的文件。所以這是我們檢查網(wǎng)站SEO各項(xiàng)數(shù)據(jù)的一項(xiàng)重要指標(biāo)。

什么情況下需要分析服務(wù)器日志？

既然服務(wù)器日志的分析這么復(fù)雜，我們有沒必要天天去分析服務(wù)器日志，那我們在什么情況下，才需要去分析服務(wù)器日志呢？對此，馬海祥建議你如果有如下的數(shù)據(jù)監(jiān)測和分析的需要，你應(yīng)該用日志分析方法了。

（1）、需要了解搜索引擎機(jī)器人或者其他非人為訪問流量，并且希望據(jù)此對網(wǎng)站進(jìn)行針對性的優(yōu)化，如通過分析搜索引擎的訪問行為來進(jìn)行SEO。

（2）、需要了解除了普通的PC客戶端之外的上網(wǎng)設(shè)備對網(wǎng)站的訪問情況。

（3）、需要了解網(wǎng)站的文件資源是否被用戶完整的下載索取。

（4）、對網(wǎng)站流量信息具有極高的保密需要，不允許讓任何第三方染指或幫忙。

（5）、對于網(wǎng)站服務(wù)器的安全性和可維護(hù)性有要求，以及有非常顯著的反抗黑客或其他非授權(quán)訪問需求的。

一、查看目錄抓取概況
目錄抓取，可以清晰的查看到光顧網(wǎng)站的蜘蛛爬行過哪些目錄。要知道：有些目錄是沒有價(jià)值的，如一些圖標(biāo)目錄、下載目錄、留言目錄等，還有后臺目錄、數(shù)據(jù)庫，如果任由蜘蛛爬行，也是一種安全隱患。另外一方面，搜索引擎對于不同的站點(diǎn)都有著抓取配額，無用目錄，更不要占用這樣的配額，以免減少有效配額的抓取量。

二、查看頁面抓取概況
頁面抓取可以準(zhǔn)確的查看到蜘蛛爬行的每一個頁面，這也是對于LOG日志分析上非常重要的一個環(huán)節(jié)。如：多重URL鏈接的抓取?垃圾頁面的抓取?都是可以在其中展現(xiàn)出來的。甚至：某個頁面抓取頻率越高，通常代表這個頁面更有價(jià)值。

如果你想優(yōu)化的頁面，抓取頻率偏低，那么就要為其增加適當(dāng)?shù)钠毓舛龋瑏磉_(dá)成你想要的結(jié)果。

三、查看狀態(tài)碼信息
狀態(tài)碼分為兩種，一種是蜘蛛狀態(tài)碼，另一種是用戶狀態(tài)碼，通過蜘蛛狀態(tài)碼可以準(zhǔn)確的查看到網(wǎng)站是否存在抓取問題。例如：404代表的是錯誤頁，301、302代表的是重定向，還有一些：504、500、等狀態(tài)碼，值得說的是：除去200狀態(tài)碼，出現(xiàn)其他的狀態(tài)碼都是應(yīng)當(dāng)值得注意的，當(dāng)然，如果只是個別幾條則無需理會。但是如果數(shù)量一旦偏多，網(wǎng)站則100%出現(xiàn)問題了。

而用戶狀態(tài)碼，則代表用戶的訪問情況，在這其中可以清晰的看到用戶最為關(guān)注哪些頁面。不要認(rèn)為這是小事情，懂得營銷的站長，知道投其所好!

通過分析服務(wù)器日志的數(shù)據(jù)，我們可以看出蜘蛛的活躍程度、親和程度、抓取深度等，總訪問次數(shù)、停留時間、抓取量越高、平均抓取頁面、平均停留時間，表明網(wǎng)站越受搜索引擎喜歡，對于重要目錄，我們可以通過內(nèi)外調(diào)整增加權(quán)重及爬取，對于無效頁面，在robots文件進(jìn)行屏蔽，進(jìn)而有效的進(jìn)行網(wǎng)站運(yùn)營。