搜索引擎蜘蛛在請(qǐng)求某個(gè)URL時(shí)得到“404”狀態(tài)碼回應(yīng)時(shí)，即知道該URL已經(jīng)失效，便不再索引該網(wǎng)頁(yè)，并向數(shù)據(jù)中心反饋將該URL表示的網(wǎng)頁(yè)從索引數(shù)據(jù)庫(kù)中刪除，當(dāng)然，刪除過(guò)程有可能需要很長(zhǎng)時(shí)間；而當(dāng)搜索引擎得到“200”狀態(tài)碼時(shí)，則會(huì)認(rèn)為該URL是有效的，便會(huì)去索引，并會(huì)將其收錄到索引數(shù)據(jù)庫(kù)，這樣的結(jié)果便是這兩個(gè)不同的URL具有完全相同的內(nèi)容：自定義404錯(cuò)誤頁(yè)面的內(nèi)容，這會(huì)導(dǎo)致出現(xiàn)復(fù)制網(wǎng)頁(yè)問(wèn)題，輕則被搜索引擎降權(quán)，重則會(huì)認(rèn)為此網(wǎng)站存在作弊行為而嚴(yán)厲懲罰。

　　

　　要讓404頁(yè)面既不會(huì)誤導(dǎo)搜索引擎蜘蛛，又能起到留住用戶(hù)的目的，最簡(jiǎn)單的方法就是修改服務(wù)器默認(rèn)的404頁(yè)面，使之符合優(yōu)化的需求。另外，現(xiàn)在網(wǎng)絡(luò)中有很多人提供了非常精美和有創(chuàng)意的404頁(yè)面，有興趣的站長(zhǎng)也可以根據(jù)自身情況采用，如圖6.22所示。

　　

　　由疏忽或者程序錯(cuò)誤造成的死鏈接以及優(yōu)化

　　

　　由于程序錯(cuò)誤或者網(wǎng)站管理者的疏忽，很容易造成死鏈接，并且這些鏈接因?yàn)槭桥�量生成的，往往�?shù)量很多，而且不容易被發(fā)現(xiàn)。

　　

　　圖有創(chuàng)意的404頁(yè)面

　　

　　舉例來(lái)說(shuō)，如果搜索引擎優(yōu)化者錯(cuò)誤地設(shè)置了一個(gè)關(guān)鍵詞鏈接規(guī)則，加入了一個(gè)本身并不能打開(kāi)的指向網(wǎng)址，這就會(huì)造成所有網(wǎng)站內(nèi)容頁(yè)中涉及這個(gè)詞時(shí)產(chǎn)生1個(gè)死鏈接。

　　

　　試想一下，如果這個(gè)詞是這個(gè)網(wǎng)站的主要熱門(mén)詞匯，出現(xiàn)的頻率很高，并且網(wǎng)站的內(nèi)容頁(yè)足夠多，結(jié)果就是一次更新頁(yè)面以后將會(huì)產(chǎn)生無(wú)數(shù)個(gè)死鏈接。

　　

　　除了站長(zhǎng)疏忽以外，有些CMS系統(tǒng)在數(shù)據(jù)庫(kù)處理刪除、轉(zhuǎn)移內(nèi)容頁(yè)操作時(shí)，也很容易產(chǎn)生死鏈接。這種情況產(chǎn)生的死鏈接修改起來(lái)比較費(fèi)勁，而且非常不易被發(fā)現(xiàn)。

　　

　　既然死鏈接都不容意被發(fā)現(xiàn)，那么有什么工具或者快速的方法能對(duì)網(wǎng)站的內(nèi)部鏈接進(jìn)行檢測(cè)，進(jìn)而快速找到死鏈接嗎？答案是有的，谷歌官方工具或者很多優(yōu)化者開(kāi)發(fā)的內(nèi)部鏈接檢查器都可以很好地解決這個(gè)問(wèn)題。

　　

　　內(nèi)部鏈接優(yōu)化必備工具：鏈接檢查

　　

　　如何查看網(wǎng)站的內(nèi)部鏈接指向情況？如何找出網(wǎng)站中的死鏈接？有很多好用的工具可以解決這個(gè)問(wèn)題，這里主要介紹兩個(gè)：

　　

　　Google網(wǎng)站管理員工具中的內(nèi)部鏈接統(tǒng)計(jì)功能，可以用于整個(gè)網(wǎng)站的內(nèi)部鏈接報(bào)告；

　　

　　中國(guó)站長(zhǎng)站的內(nèi)部鏈接檢查器，可以檢查某個(gè)單頁(yè)面的內(nèi)部鏈接情況。

　　

　　網(wǎng)站管理員工具中的內(nèi)部鏈接統(tǒng)計(jì)功能

　　

　　對(duì)有一定頁(yè)面規(guī)模的網(wǎng)站來(lái)說(shuō)，內(nèi)部鏈接比較繁雜，不容易統(tǒng)計(jì)，更不容易調(diào)整。這就需要有一個(gè)可以比較好地統(tǒng)計(jì)整個(gè)網(wǎng)站內(nèi)部鏈接情況的工具，搜索引擎優(yōu)化者可以利用統(tǒng)計(jì)報(bào)告進(jìn)行內(nèi)部鏈接結(jié)構(gòu)的調(diào)整。在Google網(wǎng)站管理員工具中，專(zhuān)門(mén)提供一個(gè)“內(nèi)部鏈接”統(tǒng)計(jì)報(bào)告，可以滿(mǎn)足這個(gè)需求。