我們先說現象吧，如果對SEO有進一步了解的人應該跟搜索引擎對話會第一時間考慮到網站的日志。日志里可以分析出網站被蜘蛛抓取了哪些頁面，什么時候來的，在這個頁面上停留了多少時間等等。

 

    我們發現蜘蛛只抓取某一個頁面。特別多的現象就是網站的首頁，我們同時也發現蜘蛛他只來不抓取，我們可以看返回碼。我們甚至可以監控蜘蛛來的次數。我們針對百度baiduspider來說，當我們在站外一些鏈接的引導，來增加蜘蛛的抓取量，我們通過增加內容的權重與網站的權重來讓搜索引擎收錄。但我也發現了這么一個問題。

 

    百度蜘蛛每天都會來，百度蜘蛛每天也都會來抓取信息，以及robots文件的訪問就是不訪問網站的內面以及其它的相關信息。如果你再去做網站的外部鏈接，換來的也是同樣的結果。當然我說的情況可能是少數，但這個情況一定存在，我確實也遇到過。我做下分析與排除跟大家分享下：

 

    做任何的事都要先做問題的分析再做一一的排除。我們分別從架構、內容、域名的角度出發去分析。

 

    從網站的架構來說，有些朋友可能會說了，網站不收錄跟你的結構與程序肯定有關系。那么我們假設這個情況是真的，換一句角度來說我們要做的就是用某個形式去做一個新的頁面出來，網站的內容結構頁面跟目前的網站要不一樣，來測試下效果。

 

    我們在原有的網站中新建了一個Z-BLOG博客，來做測試。同樣當我們新建了博客后第一步要做的就是，把新的地址提交給百度，然后再針對這個URL去做一些外部鏈接，盡可能的去引蜘蛛過來。當然經過幾天后我們也可以從日志中查看到蜘蛛是否來過，以及他的來訪問路徑。

 

    我們再從內容的角度來說。這個可能要去做測試那么就必須得要用一個合理的程序與網站來做測試。在這里寧波SEO何濤提醒大家的操作方法是，你必須要用另一個網站來操作。

 

    我們在新的網站中把網站的原有內容全部拷貝下來，再上傳。等百度蜘蛛來。這里我要說一下，為什么要用新的網站。如果我們在老的網站中操作，一定會遇到上面一樣的情況，本身網站就有問題，用有問題的網站去操作與測試，百度蜘蛛不會來也是正常的。更加不要說會來收錄我們的網頁。

 

    最后一個我說的是域名角度。如果你對我說的第二個測試有聽懂的話，那么你一定會問其實你已經做了測試。但這里何濤還有辦法去做測試

 

    相信一般的網站都會有備份，如果說條件好的話，還會有專門的備份服務器，我們可以用一個新的域名去解析到那個備份服務器中，我們用一周左右的時間去看看效果。