作 者:無網不盛網絡 發表時間:2022-05-01 02:32:19 瀏覽量:14309
搜索引擎將花費大量的資源在這種無效頁面上,那么,同等耗損下用在重要頁面上的資源將被大量擠占,可想而知,正常優質頁面在搜索引擎的部分表現將受到影響。
404狀態碼代表‘Not Found’,spider更新時會認為該頁面已失效,此時呢將在索引庫中刪除,短期內spider再次發現該url不再會抓取。因此,出來了兩類問題:第一,網頁臨時性打不開;第二,頁面永遠無法打開。針對第一類問題,我建議不要立刻返回404,而是使用503。503等同于告訴spider該頁面臨時訪問不了,過段時間再來光臨。關于503,spider會認為該網頁臨時無法訪問,短期內會再光臨。如果網頁已經恢復,即刻正常抓??;如果繼續返回503,短期內還會再光臨幾次,但如果該頁面長時間返回503,該url仍會被認作失效鏈接,從索引庫中刪除。針對第二類問題,永遠無法打開的頁面,404,不用考慮。各種web2類頁面刪除后同樣需要返回404告知搜索引擎該頁面已失效。
回歸之前那個網站,刪除內容后該頁面沒有任何價值。最恰當的處理是:
1、直接做死鏈處理并返回404;
2、在百度站長平臺死鏈提交工具中提交死鏈sitemap。
最后呢,提醒一下各位站長朋友,當您的網站存在被發布大量垃圾信息時,請:
1、及時刪除相關垃圾頁面,并做404處理;
2、制作符合要求的死鏈sitemap;
3、登錄百度站長平臺,進入死鏈提交工具提交死鏈sitemap。