統一資源定位符（Uniform Resource Locator，URL）是對可以從互聯(lián)網(wǎng)上得到的資源的位置和訪(fǎng)問(wèn)方法的一種簡(jiǎn)潔的表示，是互聯(lián)網(wǎng)上標準資源的地址?；ヂ?lián)網(wǎng)上的每個(gè)文件都有一個(gè)唯一的URL，它包含的信息指出文件的位置以及瀏覽器應該怎么處理它。

U

R

L

URL Uniform Resource Locator

URL鏈接對網(wǎng)站有多重要？就好比人身體的無(wú)數血管一樣，稍有不暢，就會(huì )帶來(lái)各種各樣的問(wèn)題，URL優(yōu)化的效果跟站點(diǎn)在百度的權重關(guān)聯(lián)性不大，但是對收錄、蜘蛛爬行和傳遞權重有明顯的提升。

統一資源定位符 URL 是對可以從因特網(wǎng)上得到的資源的位置和訪(fǎng)問(wèn)方法的一種簡(jiǎn)潔的表示。

URL 給資源的位置提供一種抽象的識別方法，并用這種方法給資源定位。

只要能夠對資源定位，系統就可以對資源進(jìn)行各種操作，如存取、更新、替換和查找其屬性。

URL 相當于一個(gè)文件名在網(wǎng)絡(luò )范圍的擴展。因此 URL 是與因特網(wǎng)相連的機器上的任何可訪(fǎng)問(wèn)對象的一個(gè)指針。

URL結構介紹

模式/協(xié)議（scheme）：它告訴瀏覽器如何處理將要打開(kāi)的文件。最常用的模式是超文本傳輸協(xié)議（Hypertext Transfer Protocol，縮寫(xiě)為HTTP），這個(gè)協(xié)議可以用來(lái)訪(fǎng)問(wèn)網(wǎng)絡(luò )。其他協(xié)議如下：

? http——超文本傳輸協(xié)議資源

? https——用安全套接字層傳送的超文本傳輸協(xié)議

?  ftp——文件傳輸協(xié)議

? mailto——電子郵件地址

? ldap——輕型目錄訪(fǎng)問(wèn)協(xié)議搜索

?  file——當地電腦或網(wǎng)上分享的文件

?  news——Usenet新聞組

? gopher——Gopher協(xié)議

?  telnet——Telnet協(xié)議

第二部分：文件所在的服務(wù)器的名稱(chēng)或IP地址，后面是到達這個(gè)文件的路徑和文件本身的名稱(chēng)。服務(wù)器的名稱(chēng)或IP地址后面有時(shí)還跟一個(gè)冒號和一個(gè)端口號。它也可以包含接觸服務(wù)器必須的用戶(hù)名稱(chēng)和密碼。路徑部分包含等級結構的路徑定義，一般來(lái)說(shuō)不同部分之間以斜線(xiàn)（/）分隔。詢(xún)問(wèn)部分一般用來(lái)傳送對服務(wù)器上的數據庫進(jìn)行動(dòng)態(tài)詢(xún)問(wèn)時(shí)所需要的參數。

有時(shí)候，URL以斜杠“/”結尾，而沒(méi)有給出文件名，在這種情況下，URL引用路徑中最后一個(gè)目錄中的默認文件（通常對應于主頁(yè)），這個(gè)文件常常被稱(chēng)為 index.html 或 default.htm。

URL優(yōu)化要點(diǎn)

URL一致性：URL 一致性是一個(gè)非常重要的指標，推薦大家一本書(shū)《走進(jìn)搜索引擎》里面有介紹spider是一種機器程序，而非人腦，雖然也有學(xué)習的過(guò)程，但是國內網(wǎng)站千千萬(wàn)，每個(gè)網(wǎng)站有不同的url規范，你如果url命名規則雜亂無(wú)章spider又怎能高效的辨別你的內容規范？ 這里舉個(gè)個(gè)人覺(jué)得做的比較好的case：“下載吧”。讀者可以去翻閱下載吧的網(wǎng)站。他的主體結構為：首頁(yè)=>列表頁(yè)=>內容頁(yè) 。這里因地制宜，只是舉例可能并不適合你的站點(diǎn)。

偏權重：通過(guò)分析發(fā)現，每個(gè)站點(diǎn)的流量是有集中點(diǎn)的。這個(gè)從愛(ài)站的工具里面可以看出來(lái)。同一個(gè)網(wǎng)站 90%的流量都出自于某個(gè)目錄，在這里面內容類(lèi)型內容質(zhì)量都是一樣的。相信大家在自己作站過(guò)程中也有所體會(huì )，百度會(huì )偏向給權重到某個(gè)目錄?？紤]到這個(gè)問(wèn)題，url一致性和目錄規劃就更重要了。

爬行原理：蜘蛛爬行原理有 深度優(yōu)先和寬度優(yōu)先這里分開(kāi)說(shuō)一下：

(1)深度優(yōu)先：深度優(yōu)先適用于一些大站，蜘蛛很渴望得到他的內容，比如新浪網(wǎng)易他們的目錄很長(cháng)，也能收錄。假如我們給蜘蛛一個(gè)線(xiàn)程只能爬取一個(gè)頁(yè)面，爬行軌跡：首頁(yè)-封面頁(yè)-頻道頁(yè)-內容頁(yè)，那么你網(wǎng)站的結構是：首頁(yè)=> xxx/a=> xxx/a/b=> xxx/a/b/c/1.html=>。蜘蛛會(huì )沿著(zhù)你的深度爬行進(jìn)去，但是無(wú)論多大的站，你的深度也必須有限，否則蜘蛛不可能無(wú)窮盡的挖掘進(jìn)去，爬累了自然就會(huì )離開(kāi)。并且內容也沒(méi)帶回去。

(2)寬度優(yōu)先：這個(gè)是我非常推崇的，而且我所有新站都是這種效果。我自己建了5天的站蜘蛛爬行800次。效果說(shuō)明在扁平化的今天，寬度優(yōu)先是可以讓蜘蛛非常高效的爬行和返回的。url結構 xxx/a/ xxx/b/ xxx/c/ 這類(lèi)的叫寬度優(yōu)化，爬行軌跡 ：首頁(yè)-頻道頁(yè)A-頻道頁(yè)B-頻道頁(yè)C/首頁(yè)-頻道頁(yè)A-內容頁(yè)A1-內容頁(yè)A2-內容頁(yè)A*

綜上所述。其實(shí)可以看出：寬度優(yōu)先的效率明顯高于深度優(yōu)先。而且蜘蛛的任務(wù)類(lèi)別也單一，非常容易識別。同一線(xiàn)程爬取的幾乎是同一類(lèi)型頁(yè)面，頁(yè)面樣式，外觀(guān)相同。蜘蛛不必花時(shí)間過(guò)于的去分析你的頁(yè)面內結構，層次清晰。

爬蟲(chóng)黑洞：這個(gè)問(wèn)題不是什么新問(wèn)題了。百度也有做專(zhuān)門(mén)的闡述，因為一些url處理不當產(chǎn)生的動(dòng)態(tài)參數后綴，或是刻意圈住蜘蛛所做的無(wú)限循環(huán)，這種的效果明顯是弊大于利。對URL 的規劃上一定要想辦法盡可能的處理掉無(wú)限動(dòng)態(tài)參數后綴，并且也要合理的給蜘蛛出口，這才是真正有利于SEO 的做法，關(guān)于處理爬蟲(chóng)黑洞的辦法這里我不做多講解。

創(chuàng )建具有良好描述性、規范、簡(jiǎn)單的url，有利于用戶(hù)更方便的記憶和判斷網(wǎng)頁(yè)的內容，也有利于搜索引擎更有效的抓取您的網(wǎng)站。網(wǎng)站設計之初，就應該有合理的url規劃。

動(dòng)態(tài)URL怎樣能利于SEO

1、CGI/ Perl方面

網(wǎng)站頁(yè)面中使用的是 CGI 或者 Perl，可用一個(gè)腳本拾取環(huán)境變量前的所有字符，再將URL 中剩余字符賦值給一個(gè)變量。就可以在 URL 中使用該變量了。不過(guò)，對于內置了部分 SSI(Server-Side Include：服務(wù)器端嵌入)內容的網(wǎng)頁(yè)，主要的搜索引擎都能夠提供索引支持。以shtml 為后綴名的網(wǎng)頁(yè)也被解析成 SSI 文件，相當于通常的html 文件。但這些網(wǎng)頁(yè)在其 URL 中使用的是cgi-bin 路徑，則有可能不被搜索引擎索引。

2、ASP方面

ASP(Active Server Pages: Web 服務(wù)器端網(wǎng)頁(yè)開(kāi)發(fā)技術(shù))被用于基于微軟的網(wǎng)絡(luò )服務(wù)器中。使用 ASP 開(kāi)發(fā)的網(wǎng)頁(yè)，一般后綴名為asp。只要避免在 URL 中使用符號“?”，大多數搜索引擎都能夠支持用 ASP 開(kāi)發(fā)的網(wǎng)頁(yè)。

3、Cold Fusion方面

如果使用的是 Cold Fusion，那么就需要在服務(wù)器端重新對其進(jìn)行配置，使其能夠將一個(gè)環(huán)境變量中的符號“?”用符號“/”代替，并將替換后的數值傳給 URL。這樣一來(lái)，最后到達瀏覽器端的就是一個(gè)靜態(tài)的URL 頁(yè)。當搜索引擎對該轉換后的文件進(jìn)行檢索時(shí)，它不會(huì )遭遇“?”，因而可繼續對整個(gè)動(dòng)態(tài)頁(yè)的索引，從而使網(wǎng)頁(yè)對搜索引擎仍然具有可讀性。

4、Apache 服務(wù)器

Apache 是最流行的 HTTP 服務(wù)器軟件之一。它有一個(gè)做 mod_rewrite 的重寫(xiě)模塊，即 URL重寫(xiě)轉向功能。該模塊能夠使你將包含環(huán)境變量的 URL 轉換為能夠為搜索引擎支持的 URL類(lèi)型。對于那些發(fā)布后無(wú)須多少更新的網(wǎng)頁(yè)內容如新聞，可采用該重寫(xiě)轉向功能。

5、建立靜態(tài)入口

在“靜動(dòng)結合，以靜制動(dòng)”的原則指導下，還可以通過(guò)對網(wǎng)站做一些修改，盡可能增加網(wǎng)頁(yè)的搜索引擎可見(jiàn)度。如將網(wǎng)頁(yè)編入靜態(tài)主頁(yè)或網(wǎng)站地圖的一個(gè)鏈接中，以靜態(tài)目錄的方式呈現該動(dòng)頁(yè)面?；蛘邽閯?dòng)態(tài)頁(yè)面建立一個(gè)專(zhuān)門(mén)的靜態(tài)入口頁(yè)面，鏈接到動(dòng)態(tài)頁(yè)面，然后將靜態(tài)入口頁(yè)面遞交給搜索引擎。對一些重要的、內容相對固定的頁(yè)面制作為靜態(tài)網(wǎng)頁(yè)，如包含有豐富關(guān)鍵詞的介紹、用戶(hù)幫助，以及含有重要頁(yè)面鏈接的地圖等。

網(wǎng)站的首頁(yè)盡量采用靜態(tài)形式，并將重要動(dòng)態(tài)內容以文本鏈接方式全部呈現，雖然增加了維護工作量，但從SEO的角度看是值得的。