Gereksiz taramayı URL grupları, sunucu kayıtları ve iş değeriyle inceleyin. Büyük siteler için kanıta dayalı teknik SEO önceliklendirme rehberi.
Tarama sayısının yüksek olması tek başına sorun, düşük olması da tek başına başarısızlık değildir. Büyük ve sık değişen sitelerde asıl soru, kaynakların hangi adreslere ayrıldığı ve önemli içeriğin güncel biçimde erişilebilir olup olmadığıdır. İncelemeyi “daha çok crawl budget” istemek gibi soyut bir hedef yerine belirli URL grupları ve gözlenen gecikmeler üzerinden kurun.
Önce bu incelemenin sitenize uygunluğunu değerlendirin
Google'ın tarama bütçesi rehberi özellikle büyük ve sık güncellenen siteleri ele alır. Sitenizin temel sorunu yetersiz içerik veya yanlış yayın ayarıysa tarama bütçesi analizi ilk öncelik olmayabilir. Yeni sayfaların keşfi, önemli değişikliklerin görülmesi ve sunucu erişimiyle ilgili somut belirtileri yazın.
Bir sorunun gerçekten taramayla ilişkili olduğuna dair hangi kanıt bulunduğunu belirleyin. Önemli sayfanın yeni olması, düşük ziyaret alması veya tek bir gün raporda görünmemesi aynı anlama gelmez. İncelemeye başlamadan beklenen içerik güncelleme düzeni ile mevcut gözlemi karşılaştırın.
Veriyi doğru tarayıcı ve doğru dönemle sınırlandırın
Search Console tarama istatistikleri sunucu yanıtları ve tarama davranışı için bir inceleme kaynağıdır. Sunucu kayıtları da kullanılacaksa hangi isteklerin gerçekten ilgili tarayıcıya ait olduğunu doğrulayın. Google'ın bot doğrulama belgesi, yalnızca görünen kullanıcı aracısı adına güvenmek yerine doğrulama yöntemleri sunar.
Kayıtların kapsadığı dönem, alan adı, önbellek veya CDN katmanı belli olsun. Eksik bir günlük dosyasıyla sitenin tamamı hakkında kesin hüküm vermeyin. Analiz için gerekli yol, durum kodu ve zaman bilgilerini kullanırken gereksiz kişisel veya gizli parametreleri paylaşım dosyalarına taşımayın.
Adresleri teknik biçimden çok davranışına göre sınıflandırın
Sıralama, filtre, arama, sayfalama, eski adres ve gerçek içerik gruplarını ayrı inceleyin. Her grupta istek yoğunluğu, yanıt durumu ve kullanıcı görevi birlikte değerlendirilsin. Aynı içeriğe giden çok sayıda adres ile çok sayıda gerçek ürün sayfası aynı karar gerektirmez.
| Grup | İncelenecek belirti | Karar sorusu |
|---|---|---|
| Tekrarlanan URL varyasyonları | Aynı içerik için çok sayıda yol | Adres üretimi sadeleştirilebilir mi? |
| Eski yönlendirmeler | Gereksiz ara geçişler | İlgili bağlantılar güncellenmeli mi? |
| Hatalı adresler | Tekrarlayan başarısız yanıt | Bu adresleri hangi kaynak üretiyor? |
| Önemli güncel içerik | Beklenen keşif veya yenileme gecikmesi | İçerik ve erişim koşulları uygun mu? |
| Geçici filtreler | Sınırsız veya anlamsız birleşim | İndeks ve tarama amacı net mi? |
İstek sayısını değil gereksiz üretimin kaynağını düzeltin
Örnek senaryo: Bir katalog aynı filtre seçimini farklı sıralarla yeni URL olarak üretiyor. Önce kombinasyon mantığı ve kullanıcı ihtiyacı incelenerek adres üretimi düzenlenebilir. Bu varsayımsal örnekte yalnızca sunucu kapasitesi artırmak, aynı gereksiz adreslerin üretilmesini durdurmaz.
Düzeltmenin etkisini seçilen URL grubu ve önemli sayfaların davranışı üzerinde izleyin. Tarama azaldı diye otomatik başarı ilan etmeyin; gerekli içeriğin yanlışlıkla engellenmediğini de doğrulayın. Bir grubun kuralı değiştiğinde diğer gruplara etkisini kontrol edin ve aynı üretim sorununun yeni özelliklerde tekrar oluşmasını önleyecek geliştirme notu hazırlayın.