Http404或notfound錯(cuò)誤消息是HTTP的“標(biāo)準(zhǔn)響應(yīng)信息”（HTTP狀態(tài)碼）之一，這意味著客戶端瀏覽網(wǎng)頁時(shí)服務(wù)器無法正常提供信息，或者服務(wù)器無故無法響應(yīng)。

　　1、很多站點(diǎn)不能避免死鏈接的存在，但是死鏈機(jī)率高會(huì)影響搜索引擎對(duì)站點(diǎn)的評(píng)級(jí)。

　　2、搜索引擎每天抓取每個(gè)網(wǎng)站的頻率。如果網(wǎng)站有很多死鏈接，就會(huì)浪費(fèi)抓取配額，影響正常頁面的抓取。

　　3、過多的死鏈對(duì)網(wǎng)站用戶來說也是一個(gè)糟糕的表現(xiàn)。

　　百度站長(zhǎng)工具有一個(gè)抓取異常，那么這個(gè)工具是如何產(chǎn)生異常數(shù)據(jù)的呢？

　　編輯錯(cuò)誤或程序員粗心地使頁面產(chǎn)生不存在的頁面。

　　由于服務(wù)器、空間或程序問題，網(wǎng)站暫時(shí)無法訪問，導(dǎo)致大量服務(wù)器錯(cuò)誤頁面，返回代碼為500。

　　當(dāng)單個(gè)爬蟲程序提取頁面URL時(shí)，它們只提取URL的一部分或正常URL之后的文本或字符。

　　在網(wǎng)站修改過程中，未經(jīng)301跳轉(zhuǎn)到相應(yīng)頁面直接刪除舊頁面，或301跳轉(zhuǎn)后部分舊頁面無法訪問。

　　網(wǎng)站管理員刪除被黑、廣告、過期、被水淹過的頁面導(dǎo)致很多死鏈接。

　　網(wǎng)頁異常中的許多錯(cuò)誤頁都是由程序員的疏忽或我們的程序問題引起的。它們應(yīng)該是普通的頁面，因?yàn)橛捎阱e(cuò)誤而無法訪問。對(duì)于這樣的頁面，請(qǐng)盡快修復(fù)。

　　404錯(cuò)誤頁面對(duì)網(wǎng)站優(yōu)化的阻礙與改善措施

　　但是必須有許多錯(cuò)誤的頁面不應(yīng)該存在，所以我們需要找到一種方法來獲取這些頁面的URL，主要有以下三種方式：

　?。?） 百度站長(zhǎng)工具-抓取異常-頁面未找到-復(fù)制數(shù)據(jù)[修復(fù)：這里不需要提交死鏈，百度站長(zhǎng)工具自動(dòng)提交死鏈]；

　?。?） 刪除頁面時(shí)，管理員手動(dòng)或自動(dòng)保存被刪除頁面的URL；

　　（3） 使用相關(guān)的爬蟲軟件對(duì)整個(gè)站點(diǎn)進(jìn)行爬蟲，獲得死鏈，如Xenu。

　　然后將上面處理的數(shù)據(jù)粘貼到網(wǎng)站根目錄下的文檔中，并將文檔地址提交到百度站長(zhǎng)工具-網(wǎng)頁抓取-死鏈提交-添加新數(shù)據(jù)-填寫死鏈文件地址。

　　如果大量錯(cuò)誤的url具有某些規(guī)則，則可以在robots文件中編寫規(guī)則，以防止爬行器獲取此類鏈接，但前提是要妥善處理正常頁面，避免阻止規(guī)則損壞正常頁面。

　　將規(guī)則添加到robots文件后，必須到百度站長(zhǎng)的robots工具進(jìn)行驗(yàn)證，將指定的錯(cuò)誤頁面放入，查看攔截是否成功，然后將正常頁面放入，查看是否被錯(cuò)誤攔截。

　　相關(guān)注意事項(xiàng)：

　　1、在百度站長(zhǎng)工具中提交死鏈接之前，請(qǐng)確保提交的死鏈接數(shù)據(jù)中沒有活鏈接。一旦有一個(gè)活動(dòng)鏈，它將顯示提交失敗，無法刪除。

　　2、由于很多網(wǎng)站程序問題，很多無法打開的頁面返回碼都不是404，這是一個(gè)很大的問題。例如，無法打開的頁的返回碼是301、200、500。如果他們是200，不同的網(wǎng)址將出現(xiàn)在網(wǎng)站上，以獲得相同的內(nèi)容。例如，在我的一個(gè)網(wǎng)站上，社區(qū)帖子被刪除后，返回代碼實(shí)際上是500。后來，我發(fā)現(xiàn)了，立即處理。嘗試找出所有錯(cuò)誤的URL格式，并將HTTP狀態(tài)代碼設(shè)置為404。

　　3、在找到所有錯(cuò)誤的頁面后，一定要找到這些頁面的URL的相同特性，并將它們與普通頁面的特性區(qū)分開來。將相應(yīng)的規(guī)則寫入robots文件，并禁止spider獲取它們。即使你已經(jīng)在網(wǎng)站管理員工具中提交了死鏈，建議機(jī)器人攔截并抓取它們。

　　4、機(jī)器人只能解決蜘蛛不再抓取此類頁面的問題，但不能解決刪除包含頁面的快照的問題。如果你的網(wǎng)站是黑色的，并且黑色頁面被刪除，除了被機(jī)器人禁止的黑色頁面外，這些頁面也應(yīng)該提交到死鏈。

北京愛品特SEO網(wǎng)站優(yōu)化提供專業(yè)的網(wǎng)站SEO診斷服務(wù)、SEO顧問服務(wù)、SEO外包服務(wù)，咨詢電話或微信：13811777897 袁先生 可免費(fèi)獲取SEO網(wǎng)站診斷報(bào)告。

北京網(wǎng)站優(yōu)化公司 >> SEO資訊 >> SEO技術(shù)技巧 >> 404錯(cuò)誤頁面對(duì)網(wǎng)站優(yōu)化的阻礙與改善措施    本站部分內(nèi)容來源于互聯(lián)網(wǎng)，如有版權(quán)糾紛或者違規(guī)問題，請(qǐng)聯(lián)系我們刪除，謝謝！