Tarama bütçesi (crawl budget) nedir?

Tarama bütçesi, Google'ın siteni ne kadar ve ne sıklıkla taradığını belirleyen sınırdır. İki parçadan oluşur: tarama kapasitesi (sunucunu yormadan kaç istek yapabileceği; hızlı ve hatasız yanıt veren sitelerde artar) ve tarama talebi (sitenin popülerliği ve içeriğin ne kadar sık değiştiğine göre Google'ın ne kadar taramak istediği).

#Neden önemli

Birkaç yüz sayfalık sitelerde tarama bütçesi nadiren sorun olur. On binlerce URL'si olan e-ticaret siteleri, filtre ve parametre kombinasyonları üreten siteler ya da yavaş sunucular için ise önemlidir. Bütçe yönlendirme zincirlerine, 404'lere, kopya parametreli URL'lere harcanırsa yeni ve güncellenen sayfalar geç keşfedilir ve geç indekslenir.

#SEOAsist'te nerede görürsün

Tarama bütçesi Google'a ait bir kavramdır; SEOAsist onu doğrudan ölçmez ama bütçeyi boşa harcayan sorunları gösterir:

• Teknik Denetim: Yönlendirme zinciri (2+ atlama), Kırık iç bağlantı (4xx), Sunucu hatası (5xx) ve Yavaş yanıt (> 3 sn) sorunları doğrudan tarama bütçesini etkiler.
• Monitörler → İndeks durumu: Google son tarama sütunu, önemli sayfalarının Google tarafından en son ne zaman tarandığını gösterir.

#Örnek

/ayakkabi?renk=siyah&beden=40&sirala=fiyat
/ayakkabi?beden=40&renk=siyah&sirala=fiyat
/ayakkabi?renk=siyah&beden=40&sirala=fiyat&sayfa=1

Aynı içeriğin yüzlerce varyasyonu taranır. Değersiz parametreleri robots.txt ile engellemek ve canonical ile asıl URL'yi göstermek bütçeyi önemli sayfalara yönlendirir.

#Sık yapılan hatalar

• Küçük bir sitede indeksleme sorununu tarama bütçesine bağlamak; sebep çoğu zaman içerik kalitesidir.
• Sitemap'e yönlendirilen ve 404 dönen URL'ler koymak.
• Sunucu yavaşlığını ve 5xx hatalarını görmezden gelmek; Google hata gördüğünde taramayı yavaşlatır.