今天飛賣品工作室仍然以日志文件為重點(diǎn)，以新上線的成都筆記本維修網(wǎng)站為實例進(jìn)行分析，來討論一下為什么我們認(rèn)為研究日志在優(yōu)化初期非常重要?

　　看正文前還是要交代一下背景：成都筆記本維修網(wǎng)站www.cdmingyang.com是一個起用了老域名的新站點(diǎn)，網(wǎng)站2012年9月2日正式上線，至今百度仍無快照。這也是我們那么頻繁研究日志文件的原因。

　　在很多站長論壇發(fā)現(xiàn)有很多朋友在詢問，為什么沒有快照，為什么不收錄，其實在那里盲目提問的時候，你有沒有花點(diǎn)時間用在研究自己站點(diǎn)的日志文件上，日志文件里包含太多的隱藏信息，只要你用心查看，就會發(fā)現(xiàn)，所以找到問題關(guān)鍵，才是解決問題必要前提條件。

　　我們具體來說一說我們所遇到的問題和解決辦法，希望能幫助到遭遇和我們相同的站長。網(wǎng)站上線后，天天查看前一天統(tǒng)計出來的日志文件，重點(diǎn)查看百度蜘蛛有沒有正常爬行，但是因為是老域名，在日志中大量出現(xiàn)類似的記錄：

　　220.181.51.119 - - [10/Sep/2012:06:26:50 +0800] "GET /news/more.php?class_id=003009 HTTP/1.1" 404 1107 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)"

　　220.181.51.117 - - [10/Sep/2012:06:30:07 +0800] "GET /faq/ HTTP/1.1" 404 1107 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)"

　　220.181.51.115 - - [10/Sep/2012:08:44:22 +0800] "GET /product/disp.php?id=85 HTTP/1.1" 404 1107 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)"

　　通過這三條日志大家有沒有看出問題所在，那就是蜘蛛爬行了原域名被收錄了的路徑，而這些路徑在新站點(diǎn)根本不存在，所以返回了404的狀態(tài)碼。

　　百度官方有說明，如果有404錯誤路徑記錄，可向搜索引擎提交，以便引擎盡早刪除已失效的收錄數(shù)據(jù)，但問題是這個域名之間用過的單位不可能提供這個記錄給我們吧，那么，有沒有什么積極點(diǎn)的辦法讓我們主動去解決這個問題呢?

　　當(dāng)然有，那就是robots.txt文件的撰寫，既然所有的搜索引擎蜘蛛爬行根本不存在的路徑，那么我們就不允許它爬行就是了。

　　怎么描寫呢?我在原有內(nèi)容上加了以下內(nèi)容：

　　Disallow: *.asp

　　Disallow: /*disp.php?id

　　Disallow: /*more.php?class_id

　　Disallow: /*index.php?class_id

　　Disallow: /*shopping.php?id

　　稍微看一下robots文件的說明，就明白，我這是禁止訪問所有后綴為asp的動態(tài)文件，禁止訪問任何文件名包含disp.php?id、more.php?class_id、index.php?class_id、shopping.php?id這些內(nèi)容的文件，而這些內(nèi)容都是我每天查看統(tǒng)計分析日志文件總結(jié)的內(nèi)容，只要蜘蛛爬行這些動態(tài)頁面，肯定都是404狀態(tài)碼返回，我這樣描述，就是主動出擊的辦法。

　　截止到2012年9月16日，通過我這樣的設(shè)置，搜狗已經(jīng)出現(xiàn)首頁快照，好吧，搜搜與百度什么時候出現(xiàn)，讓我們拭目以待吧。

　　最后，飛賣品工作室對那些還在用文本文件打開日志查看的站長表示尊敬，因為你們才是真正在研究對策找到解決辦法的關(guān)鍵，不過，今天我就給大家推薦一款免費(fèi)版查看.log日志文件的工具——Kiwi_LogViewer，百度一搜一堆，截圖給大家看看，利用工具的便捷性吧。

這是按訪問IP進(jìn)行排序

這個是按訪問時間進(jìn)行排序

　　正所謂工欲善其事，必先利其器，好的工具軟件可以讓你事半功倍哦，再次強(qiáng)調(diào)本文非軟件軟文，只是飛賣品自己的使用經(jīng)驗推薦罷了！最后祝所有站長的網(wǎng)站都有收錄，都有好排名。