1、網(wǎng)站改版較容易產(chǎn)生死鏈的
改版之前的頁(yè)面如果有價(jià)值盡量不要?jiǎng)h除和修改Url,若需要更換域名或Url分配規(guī)則,那一定要將之前的url進(jìn)行301跳轉(zhuǎn)到對(duì)應(yīng)的Url;若老的數(shù)據(jù)必須刪除,那刪除的所有頁(yè)面Url要進(jìn)行整理和提交死鏈。

2、對(duì)發(fā)現(xiàn)的死鏈接如何處理
將收集好的所有死鏈接粘貼到網(wǎng)站根目錄的一個(gè)文檔中,再把文檔地址提交到 站長(zhǎng)工具--網(wǎng)頁(yè)抓取--死鏈提交--添加新數(shù)據(jù)--填寫(xiě)死鏈文件地址;若大量死鏈具有一定的規(guī)則,如某個(gè)目錄下全部為死鏈接,可提交規(guī)則死鏈。
溫馨提示:
1、在站長(zhǎng)工具中提交死鏈前,一定要確保提交的死鏈數(shù)據(jù)不存在活鏈接。一旦存在活鏈,會(huì)顯示提交失敗導(dǎo)致無(wú)法刪除。
2、由于很多網(wǎng)站程序問(wèn)題,很多打不開(kāi)的頁(yè)面返回碼并非404,這是一個(gè)大問(wèn)題,比如明明是打不開(kāi)的頁(yè)面返回碼是301、200、500,如果是200的話,會(huì)導(dǎo)致網(wǎng)站中出現(xiàn)不同URL獲取相同內(nèi)容。比如我的一個(gè)站,社區(qū)的帖子刪除后,返回碼卻是500,后期發(fā)現(xiàn)了,立馬進(jìn)行了處理。大家盡量找出所有錯(cuò)誤 URL格式,并設(shè)置HTTP狀態(tài)碼為404。
3、把所有的錯(cuò)誤頁(yè)面找到后,一定要尋找此類頁(yè)面URL相同特征,并且和正常頁(yè)面的特征有區(qū)分,寫(xiě)對(duì)應(yīng)規(guī)則到robots文件中,禁止蜘蛛抓取,就算你已經(jīng)在站長(zhǎng)工具中提交了死鏈,也建議robots封禁抓取。
4、robots只能解決蜘蛛不再抓取此類頁(yè)面,但解決不了已經(jīng)收錄頁(yè)面的快照刪除問(wèn)題,若你的網(wǎng)站被黑,刪除了被黑頁(yè)面,除了robots封禁被黑頁(yè)面外,還應(yīng)該將這些頁(yè)面提交死鏈。提交死鏈?zhǔn)莿h除被黑頁(yè)面快照的較快辦法。