做SEO優(yōu)化的人都知道搜索引擎的工作原理。看搜索引擎的工作原理可能聽說過網(wǎng)站的抓取頻率,那么什么是網(wǎng)站抓取頻率呢?目前抓取頻率太大或太小怎么辦?以下小系列將向您解釋,希望對(duì)您有所幫助。
什么是網(wǎng)站抓取頻率?
?、倬W(wǎng)站抓取頻率是搜索引擎在單位時(shí)間內(nèi)(天級(jí))抓取網(wǎng)站服務(wù)器的總次數(shù)。如果搜索引擎抓取網(wǎng)站的頻率太高,很可能導(dǎo)致服務(wù)器不穩(wěn)定。Baiduspider會(huì)根據(jù)網(wǎng)站內(nèi)容更新頻率和服務(wù)器壓力自動(dòng)調(diào)整抓取頻率。
②Baiduspider會(huì)根據(jù)站點(diǎn)服務(wù)器的壓力自動(dòng)調(diào)整抓取頻率。
?、劢ㄗh您仔細(xì)調(diào)整抓取頻率的上限值,如果抓取頻率過小,將影響B(tài)aiduspider對(duì)網(wǎng)站的收錄。
目前抓取頻率過高怎么辦?
您可以按照以下方法依次檢查和解決頻率過高的問題:
?、偃绻J(rèn)為Baiduspider抓取了您認(rèn)為的無價(jià)值鏈接,請(qǐng)更新網(wǎng)站robots.txt進(jìn)行屏蔽抓取,然后在robots工具頁面上生效。
?、谌绻鸅aiduspider的抓取影響了您網(wǎng)站的正常訪問,請(qǐng)到抓取頻率上限調(diào)整頁面,以降低抓取頻率上限。
?、廴绻陨戏椒o法解決問題,請(qǐng)到百度站長平臺(tái)反饋中心反饋。
目前抓取頻率太小怎么辦?
您可以按照以下方法對(duì)頻率過小的問題進(jìn)行排查和解決:
?、偃绻呀?jīng)設(shè)置了抓取頻率上限,建議您先取消抓取頻率上限設(shè)置,或者在抓取頻率上限調(diào)整頁面上調(diào)整抓取頻率上限。
②如果您沒有設(shè)定抓取頻率上限,建議您先使用抓取異常工具,看看是否是抓取異常所致。
③如果你還覺得抓取量小,可能是你沒有提交新鏈接,請(qǐng)去鏈接提交頁面提交數(shù)據(jù)。
④如果以上方法無法解決問題,請(qǐng)到百度站長平臺(tái)反饋中心反饋。