3.4　內(nèi)部優(yōu)化相關(guān)名詞

3.4.1　網(wǎng)站地圖

網(wǎng)站地圖又稱“站點地圖”，它就是一個頁面，是存放網(wǎng)站所有重要鏈接的容器。一般該頁面會放置網(wǎng)站上所有希望搜索引擎重點抓取的頁面鏈接（如圖3-16所示）。

多數(shù)網(wǎng)站的鏈接層次比較深，蜘蛛很難全方位深度抓取，有了網(wǎng)站地圖就可以方便搜索引擎蜘蛛深度地抓取網(wǎng)站頁面。網(wǎng)站地圖一般存放在根目錄下并命名為sitemap，然后在網(wǎng)站首頁頁腳加上“網(wǎng)站地圖”錨文本鏈接至sitemap.html頁面為搜索引擎蜘蛛指路，增加搜索引擎對網(wǎng)站重要內(nèi)容頁面的收錄。

網(wǎng)站地圖分為XML、HTML、TXT三種格式，不同搜索引擎識別的格式不同。

?　百度：建議使用HTML格式的網(wǎng)站地圖。

?　Google：建議使用XML格式的網(wǎng)站地圖。

?　Yahoo：建議使用TXT格式的網(wǎng)站地圖。

不過就目前搜索引擎對站長的開放程度而言，站點地圖的格式并非那么重要了，比如我們通過百度站長平臺（網(wǎng)頁抓取→鏈接提交）就可以提交XML、TXT兩種格式的網(wǎng)站地圖，如圖3-17所示。同時，建議創(chuàng)建HTML格式的網(wǎng)站地圖，便于搜索蜘蛛更深層次地爬取網(wǎng)站內(nèi)容。

3.4.2　主導(dǎo)航

網(wǎng)站主導(dǎo)航一般就是放在網(wǎng)站最上面，是網(wǎng)站的欄目或主要內(nèi)容的導(dǎo)入鏈接。一般情況下，導(dǎo)航上的欄目或內(nèi)容是這個網(wǎng)站最主要的內(nèi)容，也是除首頁外我們最希望別人進入的頁面。

針對內(nèi)容較多的網(wǎng)站，一般還會為導(dǎo)航上的主要欄目設(shè)置下拉菜單（也稱二級導(dǎo)航），以此擴展用戶及搜索引擎蜘蛛的訪問深度，如圖3-18所示。

3.4.3　次導(dǎo)航

次導(dǎo)航又稱“全站鏈接”，是相對主導(dǎo)航產(chǎn)生的輔助導(dǎo)航，是對主導(dǎo)航內(nèi)容的擴展或補充，一般放在網(wǎng)站底部（即頁腳部位，如圖3-19所示）。由于種種原因，我們不可能在主導(dǎo)航上放置全部的業(yè)務(wù)關(guān)鍵詞，就只能通過頁腳部位做關(guān)鍵詞錨文本指向?qū)?yīng)的URL，做好次導(dǎo)航對于提升網(wǎng)站關(guān)鍵詞在搜索引擎上的優(yōu)化排名有著推動作用。

次導(dǎo)航的作用如下：

（1）給層次較深的頁面入口

有些目錄層次比較深的頁面或者欄目首頁沒有入口，可以選擇比較重要的放在次導(dǎo)航給以入口，便于搜索引擎蜘蛛的抓取，降低孤立頁面的數(shù)量。

（2）將權(quán)重傳遞到有用的地方

我們可以選擇比較重要的內(nèi)容放在次導(dǎo)航上并加上精準的關(guān)鍵詞，這樣可以在增加頁面關(guān)鍵詞密度的同時傳遞較高的權(quán)重，并且還可以增加內(nèi)頁被推薦的相關(guān)性，一般次導(dǎo)航中的內(nèi)容比較容易獲得排名。

（3）為用戶提供多種選擇

當用戶進入網(wǎng)站首頁時可能需要進行多次點擊才能到達需要的頁面，而網(wǎng)站的次導(dǎo)航可以為用戶提供多種選擇，降低用戶的點擊成本以提高用戶體驗。

3.4.4　面包屑導(dǎo)航

面包屑導(dǎo)航（Breadcrumb Navigation）一般出現(xiàn)在網(wǎng)站欄目頁和詳情頁主導(dǎo)航下方，如圖3-20所示，用來告知用戶當前所處的位置。

面包屑導(dǎo)航的兩大作用：

?　告知用戶當前所處的位置，并且可以通過該鏈接方便快捷地返回上一層目錄。

?　方便搜索引擎更深層次地抓取其他目錄／網(wǎng)頁內(nèi)容。

3.4.5　鏈輪

鏈輪全名為SEO鏈輪（SEO Link Wheels，如圖3-21所示），是從國外引入國內(nèi)的一種相對有效的SEO策略，主要是在互聯(lián)網(wǎng)上建立大量的獨立網(wǎng)站或在各大門戶網(wǎng)站上開設(shè)免費博客，然后將這些獨立站點或博客群單向、有策略、有計劃、緊密地鏈接到一起，并都指向要優(yōu)化的目標網(wǎng)站，以達到提升目標網(wǎng)站在搜索引擎結(jié)果中排名的目的。

3.4.6　搜索引擎蜘蛛／機器人

搜索引擎蜘蛛一般指網(wǎng)絡(luò)爬蟲，又稱為網(wǎng)頁蜘蛛或網(wǎng)絡(luò)機器人，是一種按照一定的規(guī)則自動地抓取萬維網(wǎng)信息的程序或者腳本。

常見的搜索引擎蜘蛛名稱如下。

?　百度蜘蛛：Baiduspider。

?　雅虎蜘蛛：Yahoo! Slurp China或Yahoo!。

?　谷歌蜘蛛：Googlebot。

?　有道蜘蛛：YoudaoBot或YodaoBot。

?　360蜘蛛：360Spider。

?　MSN蜘蛛：msnbot。

?　搜狗蜘蛛：Sogou News Spider。

?　必應(yīng)蜘蛛：bingbot。

3.4.7　robots.txt

robots.txt即蜘蛛?yún)f(xié)議，全稱為“網(wǎng)絡(luò)爬蟲排除標準”（Robots Exclusion Protocol），也稱為爬蟲協(xié)議、機器人協(xié)議等，其作用是告知搜索引擎允許或不允許抓取哪些頁面。

robots.txt是一種純文本格式的文件，使用任何一個常見的文本編輯器（比如Windows系統(tǒng)自帶的記事本）就可以創(chuàng)建和編輯，它是搜索引擎進入網(wǎng)站后第一個爬取的文件，通常放置于網(wǎng)站根目錄下（關(guān)于robots.txt文件的用法詳見5.6.2小節(jié)）。

例如淘寶robots.txt的位置為http://www.taobao.com/robots.txt。

3.4.8　404頁面

404頁面是用戶在瀏覽網(wǎng)頁時，服務(wù)器無法正常提供信息，或者服務(wù)器無法回應(yīng)，且不知道具體原因所返回的頁面，也稱為404錯誤頁面。404錯誤頁面通常是網(wǎng)站目標頁面被更改或刪除（前面講解死鏈接時有所提及），或者是用戶所輸入的頁面地址本身是錯誤的，由網(wǎng)站服務(wù)器反饋回來的提示頁面，如圖3-22所示。

404頁面的作用是避免搜索引擎索引死鏈接而影響收錄，避免搜索引擎降低對網(wǎng)站的信任度而降低排名，避免由于配置錯誤導(dǎo)致大量404返回200狀態(tài)碼引起降權(quán)，提升用戶體驗。