據(jù)筆者觀察，很多的個(gè)人站都對(duì)404頁(yè)面和ROBOT文件不是很重視，因?yàn)榇蟛糠謧�(gè)人站長(zhǎng)都覺(jué)得這兩個(gè)是可有可無(wú)的，但是筆者覺(jué)得這兩個(gè)文件對(duì)優(yōu)化也是有影響的，特別是404頁(yè)面，如果網(wǎng)站出現(xiàn)了無(wú)效鏈接，那么可以通過(guò)404頁(yè)面留住用戶(hù)，使之返回網(wǎng)站繼續(xù)瀏覽。而ROBOT文件則是讓蜘蛛更好的收錄網(wǎng)站的可收錄頁(yè)面，對(duì)于網(wǎng)站收錄量的高低有非常大的影響。好了，現(xiàn)在回歸正文，下面開(kāi)始講解這兩個(gè)文件的設(shè)置。

404頁(yè)面的作用

大部分站長(zhǎng)知道的404頁(yè)面可能是為了引導(dǎo)用戶(hù)在瀏覽到某個(gè)無(wú)效頁(yè)面時(shí)，可以通過(guò)404頁(yè)面提供的鏈接返回到網(wǎng)站，而且大部分站長(zhǎng)認(rèn)為404頁(yè)面就這么一個(gè)作用而已。其實(shí)不然，404頁(yè)面還有其他的作用。比如當(dāng)用戶(hù)長(zhǎng)時(shí)間瀏覽網(wǎng)站時(shí)，會(huì)出現(xiàn)麻木性的點(diǎn)擊，當(dāng)點(diǎn)擊到無(wú)效鏈接時(shí)就會(huì)產(chǎn)生退出的心理，而這時(shí)候如果網(wǎng)站沒(méi)有404頁(yè)面引導(dǎo)的話(huà)，那么用戶(hù)自然就會(huì)關(guān)閉網(wǎng)站，很容易就造成用戶(hù)的流失了。但是通過(guò)設(shè)置比較新穎的404頁(yè)面可以讓用戶(hù)緩沖一下緊張的情緒，就像盧哥的404頁(yè)面設(shè)置一個(gè)FLASH小游戲一樣，當(dāng)產(chǎn)生了無(wú)效鏈接時(shí)，用戶(hù)可以通過(guò)玩玩小游戲來(lái)緩沖一下情緒，這樣自然就會(huì)更容易的重新返回網(wǎng)站繼續(xù)瀏覽了。

所以說(shuō)，404頁(yè)面不但是為了屏蔽無(wú)效的鏈接，還可以利用404頁(yè)面緩沖用戶(hù)的瀏覽麻木性，這對(duì)于激發(fā)用戶(hù)再次瀏覽網(wǎng)站具有非常大的幫助，如果你不信，可以設(shè)置一個(gè)比較新穎的404頁(yè)面，觀察一下其跳出率和PV值吧。

404頁(yè)面的設(shè)置方法

對(duì)于上文說(shuō)的404頁(yè)面的作用，那么站長(zhǎng)如何設(shè)置有效的404頁(yè)面呢？主要有幾個(gè)方法：

1、404界面風(fēng)格要新穎。界面和風(fēng)格都比較新穎的404頁(yè)面可以讓用戶(hù)瀏覽到無(wú)效鏈接時(shí)，也不會(huì)對(duì)網(wǎng)站失去了興趣，而且可以使用戶(hù)不會(huì)為網(wǎng)站出現(xiàn)無(wú)效鏈接而對(duì)網(wǎng)站產(chǎn)生懷疑。就像站長(zhǎng)之家的404頁(yè)面，就比較獨(dú)特了。

2、404頁(yè)面要有停頓時(shí)間。這點(diǎn)對(duì)用戶(hù)和搜索引摯都非常重要，不要把404頁(yè)面停留的時(shí)間設(shè)置過(guò)短，比如1－3秒之間的就對(duì)用戶(hù)和蜘蛛都不友好。最低保持在5秒以上。

3、404頁(yè)面不要直接返回首頁(yè)。如果404頁(yè)面直接跳轉(zhuǎn)到首頁(yè)的話(huà)，那么就會(huì)讓蜘蛛爬行時(shí)，把它當(dāng)成是一個(gè)獨(dú)立頁(yè)面收錄，這樣對(duì)后期的優(yōu)化并不友好。

4、404頁(yè)面要給用戶(hù)選擇跳轉(zhuǎn)。其實(shí)這點(diǎn)是筆者最近才發(fā)現(xiàn)的，許多的404頁(yè)面只留下一個(gè)跳轉(zhuǎn)到首頁(yè)的鏈接，這樣使得用戶(hù)無(wú)法選擇自己要返回的頁(yè)面，自然對(duì)用戶(hù)體驗(yàn)就不是那么友好了，所以，在404頁(yè)面中，不但要有跳轉(zhuǎn)首頁(yè)的鏈接，還要設(shè)置返回其他頁(yè)面的鏈接，比如返回上一頁(yè)、返回之前的分類(lèi)頁(yè)等，這些都會(huì)讓用戶(hù)感覺(jué)到網(wǎng)站的人性化。

5、404頁(yè)面需要屏蔽掉。在ROBOTS文件中，要把404頁(yè)面的地址屏蔽起來(lái)，這樣即使是出現(xiàn)以上的情況也不會(huì)讓搜索引摯爬行到，也不會(huì)出現(xiàn)無(wú)效鏈接也被收錄了。

ROBOTS文件的作用

百度百科中ROBOTS文件的解釋就是告訴蜘蛛程序在服務(wù)器上什么文件是可以被查看的。就按筆者的理解，ROBOTS文件就是為了告訴蜘蛛哪些頁(yè)面可以抓取，哪些頁(yè)面不可以抓取�，F(xiàn)在很多站長(zhǎng)說(shuō)自己明明設(shè)置了禁止抓取的頁(yè)面，但是搜索引摯也一樣收錄這些頁(yè)面，開(kāi)始懷疑ROBOTS文件是不是沒(méi)作用了。其實(shí)不是，設(shè)置了還被抓取那說(shuō)明你的ROBOTS語(yǔ)法錯(cuò)誤了，ROBOTS設(shè)置不當(dāng)使得文件根本就不起作用。其實(shí)說(shuō)白了ROBOT文件的作用就是把自己需要被收錄的頁(yè)面提供給蜘蛛爬行，而不想被收錄的，那么通過(guò)ROBOTS文件進(jìn)行屏蔽，不讓蜘蛛爬行這些頁(yè)面，這樣就不會(huì)造成頁(yè)面被抓取了。所以說(shuō)，ROBOTS在網(wǎng)站優(yōu)化中的作用就是讓不利于搜索引摯收錄的頁(yè)面實(shí)行屏蔽，通過(guò)ROBOTS文件引導(dǎo)蜘蛛可以爬行哪些頁(yè)面和不可爬行哪些頁(yè)面。

ROBOT文件的設(shè)置方法

那么新手在學(xué)習(xí)網(wǎng)站優(yōu)化中，怎么才能正確的設(shè)置ROBOTS文件呢，使之具有引導(dǎo)蜘蛛爬行自己允許的頁(yè)面呢？主要有幾個(gè)設(shè)置方法：

1. 整站屏蔽設(shè)置方法。如果你的網(wǎng)站不想被全部的搜索引摯收錄的話(huà)，那么可以這樣寫(xiě)：

User-agent: *

Disallow: /

2. 屏蔽某個(gè)文件。比如我不讓搜索引摯抓取ADMIN這個(gè)文件夾，自然需要用ROBOTS文件屏蔽ADMIN這個(gè)文件了，寫(xiě)法：

User-agent:*

Disallow:/ADMIN/

3. 禁止某個(gè)搜索引摯抓取網(wǎng)站頁(yè)面。比如禁止谷歌機(jī)器人收錄網(wǎng)站的任何頁(yè)面，寫(xiě)法：

User-agent:Googlebot

Disallow:*

4. 允許一個(gè)文件中的某個(gè)文件夾被抓取，比如允許FLIMS文件夾中的INDEX2.html文件被抓取，那么就應(yīng)該這樣寫(xiě)：

User-Agent:*

Disallow:/FLIMS/

Allow:/FLIMS/INDEX2.html

其他類(lèi)似的方法也以此類(lèi)推，新手在設(shè)置ROBOTS文件時(shí)，可以多點(diǎn)參考百度優(yōu)化指南中的相關(guān)介紹，這樣對(duì)于網(wǎng)站收錄量高低可以更容易掌握，而且也利于自己知道哪些頁(yè)面被收錄，哪些頁(yè)面自己禁止被收錄了。

在設(shè)置404頁(yè)面，站長(zhǎng)應(yīng)該以用戶(hù)體驗(yàn)為參考對(duì)象，如果自己是網(wǎng)站用戶(hù)的話(huà)，當(dāng)點(diǎn)擊到無(wú)效鏈接時(shí)，什么樣的404對(duì)于自己更有吸引力。而ROBOTS文件主要是針對(duì)搜索引摯的，所以，只要設(shè)置正規(guī)，自然就不會(huì)影響到網(wǎng)站優(yōu)化的效果，但是如果設(shè)置不當(dāng)?shù)脑?huà)，可能會(huì)出現(xiàn)網(wǎng)站不被收錄的哦，或者自己不想被收錄的頁(yè)面居然收錄了，自已想被收錄的頁(yè)面卻沒(méi)有被收錄。所以，今天筆者簡(jiǎn)單分析了404頁(yè)面和ROBOTS文件的設(shè)置方法，希望新手在學(xué)習(xí)網(wǎng)站優(yōu)化的過(guò)程中，可以設(shè)置出適合自己網(wǎng)站的404和ROBOTS。本文就到這里，由豐胸產(chǎn)品（http://www.fengxiong77.com/）獨(dú)家供稿，轉(zhuǎn)載請(qǐng)注明，謝謝！

標(biāo)簽： 網(wǎng)站結(jié)構(gòu)優(yōu)化 網(wǎng)站404頁(yè)面優(yōu)化 ROBOTS文件設(shè)置 

版權(quán)申明：本站文章部分自網(wǎng)絡(luò)，如有侵權(quán)，請(qǐng)聯(lián)系：west999com@outlook.com
特別注意：本站所有轉(zhuǎn)載文章言論不代表本站觀點(diǎn)！
本站所提供的圖片等素材，版權(quán)歸原作者所有，如需使用，請(qǐng)與原作者聯(lián)系。