Tarama İstatistikleri Raporu (Crawl Stats Report) Nedir?

Bir mağaza bin ürünü yeni fotoğraflarla yayına aldığında tarama sayısı ürün sayısından fazla artabilir. Bir ürün adresi, o adresteki görseller ve tekrar çağrılan başka kaynaklar ayrı istekler oluşturabilir. Aynı adresin yeniden çağrılması da sayıyı artırır. Bu nedenle rapordaki toplamı o gün ilk kez dizine giren ürün sayısı gibi sunmak yanlıştır. Mağaza sahibinin sorusu yeni koleksiyonun bulunmasıysa taramanın amacına ilişkin dağılım ile ilgili ürünlerin dizin durumu ayrı ayrı incelenir.

Bir günde iki katına çıkan istek sayısını görünce son katalog değişikliğinin saatini ve hangi dosya türlerinin daha sık çağrıldığını not edin. Fotoğraf yenilemesiyle aynı güne gelen artışın çoğu görsel dosyalarındaysa sunucuya yüklenen işin niteliği anlaşılır. Artış çok sayıda yönlendirme yanıtından oluşuyorsa inceleme bambaşka bir yere gider. Örneklere bakarak eski kategori adresleri ile kampanya parametrelerinin hangi yanıtı döndürdüğünü incelemek, bütün mağazayı yeniden düzenlemekten önce gelir.

Rapordaki örnek URL listesi eksiksiz bir ziyaret defteri değildir. Tek ürünün belirli bir gecede taranıp taranmadığı sorusunu yanıtlamak için kendi sunucu günlükleriyle URL Denetleme kaydının sağlayabildiği bilgiyi birlikte değerlendirmek gerekir. Hizmet sağlayıcı değiştirilmişse eski ve yeni sistemin günlüklerinin aynı saati, etki alanını ve dosyaları kapsadığını kontrol edin. Yalnız yeni sunucunun kaydına bakarak geçiş gününde hiç tarama yapılmadığı sonucuna varmak yanıltabilir.

Grafiği paylaşırken seçilen mülkü ve tarihleri de yazın. Bir ajansın önce alan adının tamamını, sonraki ay yalnız ana mağazayı raporlaması gerçek tarama değişmemiş olsa bile fark gösterebilir.

DNS ve robots.txt erişimine ilişkin bir uyarı görürseniz tarama ana makine durumu aynı tarih için ayrıca açılabilir. Böylece örnekteki tek bozuk ürün bağlantısıyla daha geniş erişim sorununun aynı saatte olup olmadığı anlaşılır.