站長朋友們都了解，搜索引擎蜘蛛程序通過域名進入網站，從而開展對頁面的抓取，蜘蛛從指定的頁面出發，沿著頁面中的鏈接，按照某種特定的策略對網站中的頁面進行遍歷，收錄未訪問的網頁，然后搜索引擎再對網頁內容進行判斷，決定是否收錄入數據庫。

目前，常見的搜索引擎收錄方式主要廣度優先，深度優化和用戶提交這幾種方式，這幾種方式的結合，從而讓搜索引擎蜘蛛最大化的能夠遍歷網站的所有頁面，從而加以收錄，但是如果網站的結構設置的不好，那么很容易導致蜘蛛無法爬行到某些頁面，自然也無法收錄。事實上，網站結構在決定頁面權重方面起著非常關鍵的作用，直接影響搜索引擎對頁面的收錄，一個設計合理的網站結構可以引導搜索引擎從中抓取到更多、更有價值的頁面。

那么，我們如何根據頁面的收錄原理來進行網站的優化工作呢？事實上，蜘蛛是通過連接不斷爬行，無論是采用深度優先還是廣度優先，由于蜘蛛的能力有限，只能爬到一定的地方，這就要求我們盡量減少頁面的目錄深度及與重要頁面之間的鏈接深度，從而有利于蜘蛛的爬行，具體分析如下：

第一：減少頁面之間的鏈接深度

減少頁面之間的鏈接深度包括減少普通頁面與重要頁面之間、重要頁面與重要頁面之間的鏈接深度，可以從以下幾點入手：

1.為網站中相對重要的頁面增加更多的鏈接入口。在相對重要的頁面中存放更多鏈接指向其他的頁面，這樣不但可以減少頁面之間的鏈接深度，還可以引導搜索引擎抓取網站中更多相對重要的頁面。舉個簡單的例子，我們網站的首頁可以在合理的范圍內加上更多指向其他相對重要的頁面的鏈接。這樣有利于蜘蛛的爬行收錄。

2.如果我們要突出某個重要的頁面，可以在更多的頁面中加上鏈接指向這個頁面，就可以最大化的保證這個重要頁面的收錄和提高這個頁面的權重。

3.用心制作好網站地圖。網站地圖起到了減少頁面之間的鏈接深度，有利于蜘蛛查找到更多的頁面。