最近收到百度站長平臺的短信提示:正文如下 [百度搜索資源平臺]尊敬的搜索合作伙伴,您好!為了提升站點新資源的處理效率,避免舊數據過多造成站點數據抓取與處理異常,請于11月9日之前盡快刪除超出站點配額的歷史sitemap文件( 包括普通收錄與死鏈數據)。如到期未處理,系統將統一一刪除。 感謝您的關注與支持!
什么是歷史sitemap文件?
這個文件就是我們網站地圖,提交到百度的站長平臺去引導收錄,這個是以前的收錄方法,現在很少人在用這個技術,因為百度后來出了智能推送,自動推送,快速收錄和普通API推送這類。所以sitemap,使用的人并不多,只不過之前很多人使用,使用后,一直存在在站長平臺也沒有刪除。所以引發了百度的持續抓取,浪費抓取量,也會誤判一些網站,值得注意的是,百度還提到配額問題,每個網站可以提交sitemap配額都是不同的,有的是10000,有的是10萬,這個目前沒有準確查詢接口,不過可以通過普通提交配額可以進行估算。
這則消息主要表達的意思就是:如果你是一個老網站,在長周期運營的過程中,如果自己提交了大量的sitemap地圖文件,超出了百度搜索資源匹配的給到的配額,我們最好合理性的選擇去刪除一部分,否則截止到規定時期,系統可能會自動從最早的開始刪除。
上一篇
如何判斷新做的網站抓取是否正常下一篇
咸陽網站制作公司找哪家好?