關(guān)于網(wǎng)站死鏈的若干問(wèn)題
在網(wǎng)站的日常運(yùn)營(yíng)中,出現(xiàn)死鏈,那是一件很正常的事情。但是,如果我們不盡快處理網(wǎng)站的死鏈,不僅會(huì)影響到網(wǎng)站的用戶(hù)體驗(yàn),同時(shí)還會(huì)影響到網(wǎng)站的搜索效果。
那么,今天小編就為大家講解一下,死鏈?zhǔn)侨绾萎a(chǎn)生的;死鏈對(duì)網(wǎng)站又有何影響;我們應(yīng)該如何去發(fā)現(xiàn)死鏈;我們應(yīng)該如何正確處理死鏈。
導(dǎo)致網(wǎng)站出現(xiàn)死鏈的因素有很多。而最常見(jiàn)的因素有6個(gè):
1、網(wǎng)站內(nèi)部添加了錯(cuò)誤的內(nèi)部鏈接:由于編輯員的失誤或者是程序員的大意,導(dǎo)致網(wǎng)站產(chǎn)生了一些不存在的頁(yè)面,而這些頁(yè)面就是死鏈。
2、網(wǎng)站出現(xiàn)暫時(shí)無(wú)法訪問(wèn)的情況:由于服務(wù)器、空間或者程序出了問(wèn)題,導(dǎo)致網(wǎng)在短時(shí)間內(nèi)無(wú)法訪問(wèn),那么網(wǎng)站就會(huì)產(chǎn)生大量返回碼為5開(kāi)頭的服務(wù)器錯(cuò)誤頁(yè)面。
3、外部鏈接的錯(cuò)誤:用戶(hù)或者站長(zhǎng)在站外發(fā)布了錯(cuò)誤URL;別的網(wǎng)站復(fù)制或采集了你們含有錯(cuò)誤鏈接的頁(yè)面。
4、爬蟲(chóng)提取了不完整的url:由于網(wǎng)站個(gè)別url中存在不規(guī)則字符,或者url與后面的文字鏈接起來(lái),導(dǎo)致個(gè)別爬蟲(chóng)在提取頁(yè)面url時(shí),提取了不完整的url,使得url變得無(wú)效。
5、網(wǎng)站改版:這是最容易產(chǎn)生死鏈的一個(gè)因素。因?yàn)榫W(wǎng)站在改版的時(shí)候,會(huì)刪除許多的老頁(yè)面,從而會(huì)導(dǎo)致網(wǎng)站產(chǎn)生大量的死鏈。
6、管理員刪除頁(yè)面:網(wǎng)站管理員刪除被黑、廣告、過(guò)時(shí)、被灌水頁(yè)面導(dǎo)致很多死鏈接。
死鏈對(duì)網(wǎng)站的影響有三方面,分別是:
1、影響搜索引擎對(duì)網(wǎng)站的評(píng)分。
2、會(huì)浪費(fèi)掉搜索引擎抓取網(wǎng)站頁(yè)面的配額并且會(huì)影響其他正常頁(yè)面的抓取。
3、會(huì)影響網(wǎng)站的用戶(hù)體驗(yàn)。
網(wǎng)站的鏈接那么多,我們可以通過(guò)什么方法去發(fā)現(xiàn)死鏈呢?
1、百度站長(zhǎng)工具中的抓取異常工具可以查看最近一個(gè)月產(chǎn)生的各種死鏈,并支持導(dǎo)出功能。
1、百度站長(zhǎng)工具:站長(zhǎng)工具有一個(gè)抓取異常工具,可以查看最近一個(gè)月所產(chǎn)生的鏈接,而且可以導(dǎo)出。
2、使用相關(guān)爬蟲(chóng)軟件:比如Xenu,可以爬取全站所有鏈接并分析頁(yè)面狀態(tài),分析完成后,還可以導(dǎo)出,對(duì)于我們提取死鏈接很方便。
3、在網(wǎng)站運(yùn)營(yíng)中,特別是論壇,經(jīng)常需要?jiǎng)h除某些頁(yè)面,在刪除頁(yè)面時(shí)一定要記錄對(duì)應(yīng)的Url以便后期提交死鏈。
通過(guò)上述兩種辦法提取的死鏈列表,一定要經(jīng)過(guò)刪重和驗(yàn)證,比如用wps表格進(jìn)行刪除重復(fù)鏈接,然后再使用Http狀態(tài)批量查詢(xún)工具驗(yàn)證下是否確實(shí)是死鏈接。
1、網(wǎng)站改變是最容易產(chǎn)生死鏈接的,所以我們?cè)诟陌婢W(wǎng)站的時(shí)候,盡量不要?jiǎng)h除或修改一些有價(jià)值的url。如果我們一定要更換域名或者url分配規(guī)則的話(huà),那么我們一定要對(duì)之前有價(jià)值的url進(jìn)行一個(gè)301跳轉(zhuǎn),使其跳轉(zhuǎn)到相關(guān)的url上。如果我們真的要?jiǎng)h除老的數(shù)據(jù)的話(huà),那么我們必須要對(duì)刪除的頁(yè)面的url進(jìn)行整理以及提交死鏈。
2、對(duì)于那些已經(jīng)整理好的死鏈粘貼到網(wǎng)站根目錄的一個(gè)文檔中,然后將這個(gè)文檔地址提交到百度站長(zhǎng)工具--網(wǎng)頁(yè)抓取--死鏈提交--添加新數(shù)據(jù)--填寫(xiě)死鏈文件地址,這樣就可以處理網(wǎng)站所發(fā)現(xiàn)的死鏈了。當(dāng)然,如果這些死鏈?zhǔn)怯幸欢ㄒ?guī)則的話(huà),我們可以用規(guī)則開(kāi)提交死鏈的。
相關(guān)注意事項(xiàng):
1、在百度站長(zhǎng)工具中提交死鏈前,一定要確保提交的死鏈數(shù)據(jù)不存在活鏈接。一旦存在活鏈,會(huì)顯示提交失敗導(dǎo)致無(wú)法刪除。
2、由于很多網(wǎng)站程序問(wèn)題,很多打不開(kāi)的頁(yè)面返回碼并非404,這是一個(gè)大問(wèn)題,比如明明是打不開(kāi)的頁(yè)面返回碼是301、200、500,如果是200的話(huà),會(huì)導(dǎo)致網(wǎng)站中出現(xiàn)不同URL獲取相同內(nèi)容。比如我的一個(gè)站,社區(qū)的帖子刪除后,返回碼卻是500,后期發(fā)現(xiàn)了,立馬進(jìn)行了處理。大家盡量找出所有錯(cuò)誤URL格式,并設(shè)置HTTP狀態(tài)碼為404。
3、把所有的錯(cuò)誤頁(yè)面找到后,一定要尋找此類(lèi)頁(yè)面URL相同特征,并且和正常頁(yè)面的特征有區(qū)分,寫(xiě)對(duì)應(yīng)規(guī)則到robots文件中,禁止蜘蛛抓取,就算你已經(jīng)在站長(zhǎng)工具中提交了死鏈,也建議robots封禁抓取。
4、robots只能解決蜘蛛不再抓取此類(lèi)頁(yè)面,但解決不了已經(jīng)收錄頁(yè)面的快照刪除問(wèn)題,若你的網(wǎng)站被黑,刪除了被黑頁(yè)面,除了robots封禁被黑頁(yè)面外,還應(yīng)該將這些頁(yè)面提交死鏈。提交死鏈?zhǔn)莿h除被黑頁(yè)面快照的最快辦法。
百度口碑
100%好評(píng)
360安全認(rèn)證
安全可信賴(lài)
公安機(jī)關(guān)
公網(wǎng)備案