一個(gè)站點(diǎn)的URL鏈接有多重要?如同人體內(nèi)無(wú)數(shù)的血管，若不暢通，就會(huì)產(chǎn)生各種問(wèn)題。Baidu中URL優(yōu)化的效果與網(wǎng)站的權(quán)重?zé)o關(guān)，但是可以顯著提高網(wǎng)站的權(quán)重檢索，蜘蛛爬蟲和傳播。盡管我很少發(fā)表文章，但是我經(jīng)常發(fā)現(xiàn)，大部分搜索引擎優(yōu)化的問(wèn)題都是關(guān)于收錄的糟糕，權(quán)重的高低。我瀏覽了許多網(wǎng)站，許多基本的工作都是亂糟糟的。就是想換個(gè)思路，站長(zhǎng)變成蜘蛛爬你的站，相信大多數(shù)站長(zhǎng)自己也跑不了。本文中，我將僅介紹一些重要的URL優(yōu)化點(diǎn)。

　　網(wǎng)站URL地址的一致性

　　URL一致性是一項(xiàng)重要指標(biāo)。建議一本書《走進(jìn)搜索引擎》介紹蜘蛛是一個(gè)機(jī)器程序，而不是人腦。盡管是個(gè)學(xué)習(xí)過(guò)程，但在國(guó)內(nèi)卻有數(shù)以千計(jì)的網(wǎng)站。每一個(gè)站點(diǎn)的URL規(guī)定不一樣。在URL命名規(guī)則混亂的情況下，spider如何能有效識(shí)別你的內(nèi)容規(guī)范?這里有一個(gè)更好的例子：“下載它”。用戶可訪問(wèn)網(wǎng)頁(yè)下載欄。其基本結(jié)構(gòu)為：首頁(yè)=列表頁(yè)面=內(nèi)容頁(yè)面。

　　網(wǎng)址標(biāo)準(zhǔn)化直接影響網(wǎng)站排名的優(yōu)化。

　　同一站點(diǎn)有90%的流量來(lái)自某一目錄，其內(nèi)容類型和內(nèi)容質(zhì)量都一樣。確信你在自己站的過(guò)程中有一定的經(jīng)驗(yàn)，百度會(huì)給某一目錄賦權(quán)。鑒于這一點(diǎn)，URL一致性和目錄規(guī)劃變得非常重要。

　　蜘蛛爬行原理收錄深度優(yōu)先和寬度優(yōu)先。

　　網(wǎng)站內(nèi)鏈?zhǔn)且粋€(gè)非常重要的優(yōu)化，可以讓蜘蛛更容易抓取網(wǎng)站頁(yè)面，提升網(wǎng)站頁(yè)面的收錄速度，從而提升網(wǎng)站排名和權(quán)重。

　　Widget：這是我的最愛(ài)，我所有的新網(wǎng)站都有這種效果。我自己建了五天站，蜘蛛爬過(guò)八百次。結(jié)果顯示，在當(dāng)今的平面上，寬度優(yōu)先使得蜘蛛爬升并返回的效率非常高。URL結(jié)構(gòu)XXX/A/XXX/B/XXX/C/這種叫寬度優(yōu)化，爬升軌跡：首頁(yè)-通道頁(yè)面A-通道頁(yè)面B-頻道頁(yè)C/主頁(yè)-頻道頁(yè)A-內(nèi)容頁(yè)A1-內(nèi)容頁(yè)a2-內(nèi)容頁(yè)A*

　　總而言之。事實(shí)上，我們可以看到寬度優(yōu)先的效率明顯高于深度優(yōu)先的效率。而且蜘蛛的任務(wù)類別也比較單一，很容易識(shí)別。同一個(gè)線程可以爬行幾乎相同類型的頁(yè)面，具有相同的頁(yè)面樣式和外觀。蜘蛛不必花費(fèi)太多時(shí)間來(lái)分析頁(yè)面的結(jié)構(gòu)，層次結(jié)構(gòu)很清晰，爬行動(dòng)物黑洞的問(wèn)題并不新鮮。