有時網(wǎng)站運行中會出現(xiàn)死鏈接,死鏈接過多會影響搜索引擎蜘蛛的爬行,從而影響網(wǎng)站的整體質(zhì)量。幸運的是,現(xiàn)在許多站長工具都提供了死鏈接檢測工具,死鏈接已無所遁形。網(wǎng)站檢查如果沒有死鏈固然好;但如果檢查出來了該怎么辦呢?
1 通過robots協(xié)議解決死鏈問題
只要在robots協(xié)議添加一條:“disallow:死鏈接URL ”就可以了。但也有一個缺點因為obots協(xié)議生效有一個時間緩沖期,過多的死鏈會增加robots協(xié)議的體積。
2 通過自定義404頁來解決死鏈問題。
當訪問站內(nèi)頁面出錯時,用自定義的404頁面用于告訴蜘蛛鏈接已損壞,并且不會有大量的404錯誤返回代碼。缺憾在于,如果網(wǎng)站的死鏈沒有解決并且繼續(xù)存在,蜘蛛仍然會爬行這個鏈接。
3 百度工具欄有一個死鏈接提交工具,通過提交它禁止蜘蛛來爬行死鏈接。
只要提交,百度蜘蛛就永遠不會爬行這個鏈接。最重要的是,因為這是提交給百度的,不會占用網(wǎng)站上的任何空間,而且生效時間非???。缺憾在于:只針對百度搜索引擎。
這些都是死鏈接的解決方案。一般來說,網(wǎng)站上有很多死鏈接。要么是人為錯誤,要么是網(wǎng)站程序本身存在問題和錯誤。最好的辦法是盡快解決死鏈。