Arama motorlarının içeriğinizi nasıl ele aldığını etkileyen birçok faktör vardır. Crawl budget yani tarama bütçesi de bu faktörlerden biridir. Tarama bütçesini anlarsanız, sitenizin etkili bir şekilde taranmasını sağlamak için bazı teknik işlemleri kullanabilirsiniz. Öncelikle Crawl Budget tanımının ne olduğuna bakalım.
Crawl budget Googlebot’un belirli bir zaman dilimi içerisinde bir web sitesinde taradığı ve dizine eklediği sayfa sayısıdır. Arama motorlarının dizine eklenebilir sayfalarınızı bulmasını ve anlamasını istiyorsanız bunun için tarama bütçesi optimizasyonu yapmanız gerekmektedir.
Tarama bütçesi dizine eklenen toplam sayfa sayısının günlük taranan sayfa sayısına bölümüyle hesaplanmaktadır. Google Search Console üzerinden Eski Araçlar ve Raporlar sekmesinin altında bulunan Tarama İstatikleri bölümünde günlük taranan sayfa sayısını bulabilirsiniz.
Dizine eklenen toplam sayfa sayısının 1.500 olduğunu günlük taranan sayfa sayısının 600 olduğunu düşünürsek 1.500/600 bölümüyle tarama bütçeniz 2,5 olarak çıkacaktır. Bu rakam 10 ve daha büyük bir oranda çıkarsa sitenizin tarama bütçesi optimizasyonuna ihtiyacı var demektir. 10 ve daha fazla oranda çıkan tarama bütçesinde arama motorlarının web sitenizi verimli bir şekilde tarayamadığı sonucunu çıkarmalısınız. Böylelikle sitenizde dizine eklenmesine gerek olmayan sayfalarınız önemli sayfalarınızın keşfedilmemesine neden olabilir. Eğer bu rakam 3’ün altında ise herhangi bir sıkıntının olmadığını söyleyebiliriz.
Site Hızını Artırmak
Site hızı en önemli faktörler arasındadır. Eğer yavaş açılan bir siteye sahipseniz arama motoru botları sitenizdeki sayfaları verimli bir şekilde tarayamaz ve dizine ekleyemez. Siteniz daha hızlı ve daha iyi bir performans gösterirse arama motoru botları sayfalarınızı daha hızlı tarar ve daha fazla sayfayı dizine ekler.
Dizine Eklenmeyecek Sayfaları Tespit Etme
Sitenizde yinelenen, ince ve düşük değerli içeriklerin dizine eklenmesi arama motoru botlarının önemli sayfaları ve içerikleri keşfedememesine neden olacaktır. Bu nedenle yinelenen, ince ve düşük değerli içeriklere sahip sayfalarınızı dizinden hariç tutmanız tarama bütçesini optimize etmek için yapacağınız en önemli adımlardan biri olacaktır.
Yönlendirme Zincirlerinden Kurtulma
301 yönlendirme zincirleri, eski URL ile hedef URL arasında iki ve daha fazla yönlendirme olduğunda ortaya çıkan bir durumdur. Yönlendirme zincirleri, kullanıcı deneyimi için olumsuz bir durum olmakla birlikte tarama bütçesine de zarar vermektedir. Bu durumdan kaçınmak için yönlendirme zincirini tek bir 301 yönlendirmesiyle değiştirmeniz gerekmektedir.
Kaliteli içeriğe sahip ve iyi yapılandırılmış bir web sitesi hem arama motoru sonuçlarındaki sıralamalarınızın iyileşmesini hem de Google botunun sitenizi daha sık ziyaret etmesini sağlar. Hem Google botunun hem de kullanıcılarını sitenizi anlamasını sağlamak çok önemli. Bu nedenle burada belirtilen yöntemleri optimize etmek çok önemli.