一個站點的URL連結有多重要？如同人體內無數的血管，若不暢通，就會產生各種問題。Baidu中URL最佳化的效果與網站的權重無關，但是可以顯著提高網站的權重檢索，蜘蛛爬蟲和傳播。儘管我很少發表文章，但是我經常發現，大部分搜尋引擎最佳化的問題都是關於收錄的糟糕，權重的高低。我瀏覽了許多網站，許多基本的工作都是亂糟糟的。就是想換個思路，站長變成蜘蛛爬你的站，相信大多數站長自己也跑不了。本文中，我將僅介紹一些重要的URL最佳化點。

網站URL地址的一致性

URL一致性是一項重要指標。建議一本書《走進搜尋引擎》介紹蜘蛛是一個機器程式，而不是人腦。儘管是個學習過程，但在國內卻有數以千計的網站。每一個站點的URL規定不一樣。在URL命名規則混亂的情況下，spider如何能有效識別你的內容規範？這裡有一個更好的例子：“下載它”。使用者可訪問網頁下載欄。其基本結構為：首頁=列表頁面=內容頁面。

編輯

網址標準化直接影響網站排名的最佳化。

同一站點有90%的流量來自某一目錄，其內容型別和內容質量都一樣。確信你在自己站的過程中有一定的經驗，百度會給某一目錄賦權。鑑於這一點，URL一致性和目錄規劃變得非常重要。

蜘蛛爬行原理收錄深度優先和寬度優先。

網站內鏈是一個非常重要的最佳化，可以讓蜘蛛更容易抓取網站頁面，提升網站頁面的收錄速度，從而提升網站排名和權重。

Widget：這是我的最愛，我所有的新網站都有這種效果。我自己建了五天站，蜘蛛爬過八百次。結果顯示，在當今的平面上，寬度優先使得蜘蛛爬升並返回的效率非常高。URL結構XXX/A/XXX/B/XXX/C/這種叫寬度最佳化，爬升軌跡：首頁-通道頁面A-通道頁面B-頻道頁C/主頁-頻道頁A-內容頁A1-內容頁a2-內容頁A*

總而言之。事實上，我們可以看到寬度優先的效率明顯高於深度優先的效率。而且蜘蛛的任務類別也比較單一，很容易識別。同一個執行緒可以爬行幾乎相同型別的頁面，具有相同的頁面樣式和外觀。蜘蛛不必花費太多時間來分析頁面的結構，層次結構很清晰，爬行動物黑洞的問題並不新鮮。