在講解這個(gè)話題之前，先說(shuō)一說(shuō)404錯(cuò)誤頁(yè)面是怎么產(chǎn)生的？當(dāng)網(wǎng)站改版和調(diào)整，移動(dòng)或者刪除了以前的網(wǎng)站目錄和網(wǎng)頁(yè)，而用戶和搜索引擎蜘蛛再次訪問(wèn)這些網(wǎng)頁(yè)路徑，會(huì)發(fā)現(xiàn)這些頁(yè)面不存在，這就是常說(shuō)的錯(cuò)誤頁(yè)面。如果你的網(wǎng)站正確設(shè)置了404錯(cuò)誤頁(yè)面，查看服務(wù)器日志會(huì)發(fā)現(xiàn)404狀態(tài)碼。原網(wǎng)站頁(yè)面大量移除，這樣的行為對(duì)于訪客和搜索引擎都是非常不友好的，被收錄到搜索引擎數(shù)據(jù)庫(kù)中的頁(yè)面如果大量消失，非常有可能觸發(fā)沙盒和降權(quán)現(xiàn)象。

但在實(shí)際過(guò)程中，為了網(wǎng)站的長(zhǎng)遠(yuǎn)發(fā)展，網(wǎng)站調(diào)整和改版都是很難避免的。最近買(mǎi)了一個(gè)老域名來(lái)建一個(gè)護(hù)膚品網(wǎng)站，第二天查看IIS日志發(fā)現(xiàn)蜘蛛每天大量抓取原網(wǎng)站的頁(yè)面，但是那些頁(yè)面和目錄都不存在了，為了避免域名被打入沙盒和降權(quán)，建議有條件的朋友對(duì)錯(cuò)誤目錄和頁(yè)面進(jìn)行301永久重定向，而我是采取了404錯(cuò)誤頁(yè)面的方法來(lái)降低對(duì)新網(wǎng)站帶來(lái)的影響：

一、制作404錯(cuò)誤提示頁(yè)

制作404頁(yè)面在醒目位置要明確注明“訪問(wèn)的頁(yè)面已經(jīng)不存在，您可以返回×××網(wǎng)站首頁(yè)進(jìn)行瀏覽你所需要的內(nèi)容”，并在這段說(shuō)明中加入首頁(yè)地址鏈接來(lái)引導(dǎo)用戶，一方面可以降低用戶流失，另一方面可以和搜索引擎蜘蛛對(duì)話，告訴蜘蛛這是一個(gè)錯(cuò)誤的的地址。許多朋友將404錯(cuò)誤頁(yè)面跳轉(zhuǎn)到首頁(yè)，二老貓認(rèn)為這是存在風(fēng)險(xiǎn)不可取的，會(huì)被搜索引擎誤認(rèn)為做弊導(dǎo)致首頁(yè)降權(quán)。

二、404錯(cuò)誤頁(yè)的測(cè)試

頁(yè)面制作好以后，命名為404.htm或者其它后輟傳入網(wǎng)站根目錄（由于個(gè)別虛擬空間要求不一樣可詳細(xì)查看空間說(shuō)明和詢問(wèn)主機(jī)商），上傳完成后在虛擬主機(jī)管理面板上設(shè)置自定義404錯(cuò)誤頁(yè)路徑。傳上去后還沒(méi)有完事，有更重要的工作，那就是測(cè)試404錯(cuò)誤頁(yè)面的有效性，許多網(wǎng)站提供“http狀態(tài)查詢”，輸入一個(gè)不存在的頁(yè)面和或目錄然后檢測(cè)，當(dāng)返回狀態(tài)碼為404說(shuō)明是有效的，如果不存在的路徑返回狀態(tài)碼為200那就需要注意，說(shuō)明你的設(shè)置無(wú)效或者你的主機(jī)自定義404錯(cuò)誤頁(yè)面有問(wèn)題，需要聯(lián)系主機(jī)商解決。下圖為正確設(shè)置了404錯(cuò)誤頁(yè)面返回的狀態(tài)碼。

三、設(shè)置robots禁止抓取錯(cuò)誤頁(yè)面

對(duì)于一個(gè)功能完善和友好的新網(wǎng)站，404錯(cuò)誤頁(yè)面是必須的，但是我現(xiàn)在的情況光制作了404還不夠。301定向太麻煩，后來(lái)想到了robots，這是網(wǎng)站與搜索引擎蜘蛛對(duì)話的一個(gè)重要文件，那我就在這個(gè)文件中告訴蜘蛛禁止抓取不存在的目錄和網(wǎng)頁(yè)。查看空間訪問(wèn)日志發(fā)現(xiàn)蜘蛛主要是抓取名為mynist目錄下的文件，這個(gè)目錄是以前舊網(wǎng)站的靜態(tài)網(wǎng)頁(yè)存放目錄，弄清楚就好辦了，在robots文件中添加如下語(yǔ)句Disallow:/mynist/，意思是禁止抓取此目錄下的任何文件，再仔細(xì)查看日志，將不存在的目錄和頁(yè)面一一添加在robots文件中。百度站長(zhǎng)俱樂(lè)部lee提到過(guò)，robots新添加的語(yǔ)句并不會(huì)立即生效需要過(guò)程的，正常情況下一周內(nèi)生效，所以在修改后幾天內(nèi)蜘蛛仍然會(huì)抓取已禁止的頁(yè)面是正常的。

在這個(gè)期間我每天為網(wǎng)站更新三篇原創(chuàng)內(nèi)容，并每天做少量的外鏈，大概10天后網(wǎng)站首頁(yè)快照變隔天了，內(nèi)容頁(yè)面也陸續(xù)被百度放出來(lái)，這樣的結(jié)果說(shuō)明我的做法是正確的，我買(mǎi)來(lái)的老域名并沒(méi)有被降權(quán)和打入沙盒長(zhǎng)久觀察。所以今天把這個(gè)方法分享出來(lái)，希望能給網(wǎng)站改版的朋友做個(gè)參考和提供一些幫助。本文由淘寶裂帛女裝http://www.21rip.info小編二老貓?jiān)瓌?chuàng)首發(fā)，如需轉(zhuǎn)載請(qǐng)保留版權(quán)。

標(biāo)簽： 301 301定向 301永久重定向 404錯(cuò)誤 404錯(cuò)誤頁(yè)面

版權(quán)申明：本站文章部分自網(wǎng)絡(luò)，如有侵權(quán)，請(qǐng)聯(lián)系：west999com@outlook.com
特別注意：本站所有轉(zhuǎn)載文章言論不代表本站觀點(diǎn)！
本站所提供的圖片等素材，版權(quán)歸原作者所有，如需使用，請(qǐng)與原作者聯(lián)系。