谷歌在其 SEO Mythbusting 影片系列的最新一集中解釋了「抓取預算」 的實際 含義。而且,它非常有洞察力。
該影片連結如下,但在本部落格中,我將分解我的關鍵要點和時間戳,以節省您一些時間。
Google 的 Martin Splitt 回答了十多個有關「抓取預算」的常見問題…
1 – 什麼是抓取預算和需求? (1:15)
抓取預算是在不壓垮伺服器的情況下盡快抓取網站上盡可能多的內容之間的平衡。
預算是 Googlebot 在不壓垮伺服器的情況下可以同時發出的請求數量。
這是指 Google 根據網站主題抓取網站的頻率。
例如,與食譜網站相比,突發新聞網站可能有更高的抓取需求。
2 – Googlebot 如何做出決策? (2:44)
Google 根據內容變更的頻率來決定抓取頁面的頻率。如果更改頻率較低,則該網站將不會像其他網站那樣被頻繁抓取。
3 – 內容抓取頻率 (3:43)
Google 使用 ETag、HTTP 標頭和上次修改日期等內容來確定抓取內容的頻率。
ETag 是一個快取標頭,其中包含內容的指紋,用於偵測隨時間的變化。
4 – 伺服器和爬行預算 (5:00)
當根本問題通常是伺服器設定或內容品質時,抓取預算 加拿大 b2b 潛在客戶 經常被認為是網站所有者的問題。

5 – 內容品質 (6:18)
當內容被更頻繁地抓取時,並不表示內容是高品質的。當內容爬行頻率較低時,這也不表示內容品質較低。
6 – 在網站遷移期間準確抓取您的網站 (8:18)
馬丁·斯普利特(Martin Splitt)建議逐步更新網站地圖,註明更改內容和時間。除此之外,盡量確保兩台伺服器都盡可能順利運作。
7 – 資源快取 (11:46)
Google 盡可能積極地快取資源,以避免每次都重新抓取它們。
8 – 抓取預算與特定產業 (13:34)
電子商務網站和大型出版商最關心的應該是抓取預算。
9 – 您能讓 Googlebot 更頻繁地抓取您的網站嗎? (17:40)
不,這是不可能的。網站擁有者可以限制 Googlebot 抓取的頻率,但無法觸發 Googlebot 更頻繁地抓取。