Yayımlanan Dosya ile Okunan Sürüm
Robots.txt kuralını sunucuda değiştirmek, bütün Google istemcilerinin aynı anda yeni sürümü kullandığını göstermez. Google dosyanın önbellekteki kopyasını kullanabilir. Bu yüzden eski engel davranışı görüldüğünde önce iki farklı durum ayrılır: yeni metin gerçekten yayında mı, Google bu metni henüz aldı mı?
Kurgusal bir mağazada ürün dizini açılmış fakat tarama henüz başlamamış olabilir. İlk kontrol canlı robots.txt yanıtıdır. Yönetim ekranındaki taslak veya yerel dosya tek başına kanıt sayılmaz. Dışarıdan okunan dosyanın gerçekten yeni kuralı içerdiği görülmelidir.
Doğru Dosyayı Değiştirmek
Güncelleme için mevcut dosyanın kopyası alınır, gerekli kural düzenlenir ve doğru kök adrese yayımlanır. Alt yolda çalışan bir site, ana makinenin kök dosyasını yönetme yetkisine sahip olmayabilir. Bu durumda değişikliği yapacak alan yöneticisi belirlenir. Eski dosyayı başka klasöre yüklemek veya adını değiştirmek yeni kuralı Google’a sunmaz. Barındırma hizmeti dosyayı ayarlardan üretiyorsa desteklenen yöntem kullanılır. İnceleme notu hangi kaynağın değiştirildiğini ve bunun gerçek dış yanıta nasıl yansıdığını açıkça belirtmelidir.
Önbellek Süresini Yorumlamak
DNS veya sunucu erişim sorunları yeni robots.txt dosyasının alınmasını etkileyebilir. Google normal süreçte önbelleği yeniler; ancak dosya tekrar getirilemiyorsa önceki kopya daha uzun süre kullanılabilir. Bu nedenle belgede verilen olağan yenileme aralığı kesin sonuç süresi olarak sunulmaz. Yanıt başlıklarının önbellek davranışına etkisi de teknik kontrolde değerlendirilir. Sorun devam ediyorsa yalnız beklemek veya kuralı tekrar kaydetmek yerine Google’ın dosyaya erişip erişemediği araştırılır. Aynı alanın başka protokol veya host sürümünden alınmış dosya, hedef kapsamın güncel olduğunu kanıtlamaz.
Yeni Dosya ile Google Önbelleği
Canlı Metni Okuyun: Yeni kuralın dış yanıtta bulunduğunu doğrulayın. Erişimi Kontrol Edin: Dosyanın yeniden getirilebilmesini inceleyin. Sürümü İzleyin: Google raporunu gerçek dosyayla eşleştirin. Önbellek yenilemesini açıklayan şemadır. Şema kavramsal anlatımdır; gerçek panel ekranı, müşteri verisi veya yapılmış test sonucu değildir.
Yeniden Tarama İsteğinin Görevi
Daha hızlı yenileme ihtiyacında Search Console robots.txt raporundaki yeniden tarama işlevi değerlendirilebilir. Bu işlem dosyayı sunucuya yüklemez ve yanlış sözdizimini kendisi düzeltmez. Önce yeni dosyanın erişilebilirliği ve örnek yolların doğru eşleşmesi kontrol edilir. Sonra araç üzerinden alınan durum izlenir. Bir yeniden tarama talebi, bütün ürün URL’lerinin de hemen ziyaret edileceği anlamına gelmez. Dosyanın yenilenmesi ile sayfaların sonraki taraması ayrı aşamalardır. Operasyon kaydında yapılan isteğin robots dosyasına mı yoksa tek sayfa incelemesine mi ait olduğu belirtilir.
Eski Davranışın Nedenini Kapatmak
Kabulde canlı dosyanın içeriği, Google raporunda görülen sürüm ve örnek URL’nin beklenen erişim kararı birlikte değerlendirilir. Dosya güncel olduğu hâlde sorun sürüyorsa kural eşleşmesi, istemci grubu veya başka sunucu engeli araştırılır. Bütün gecikmeler önbelleğe bağlanmaz. Önceki dosya yedeği ve değişiklik gerekçesi kurum içi bakım kaydında tutulabilir. Sonuç yalnız kuralın doğru kapsamda sunulduğunu açıklamalıdır; sayfaların dizine alınma veya aramada görünme zamanı vaat edilmez. Aynı sorun sonraki düzenlemede tekrarlanırsa hangi aşamanın geciktiği bu kayıtla daha kolay bulunur.
Bu Yazıdaki Terimler 1 Kavram
Kısa açıklamaları burada okuyabilir, ayrıntılar için sözlüğe geçebilirsiniz.
- Domain Name System (DNS)
- DNS (Domain Name System, alan adı isimlendirme sistemi), harf ve rakamlardan oluşan web sitesi adlarını IP adreslerine çevirerek kullanıcıyı ilgili siteye yönlendiren sistemdir. Örneğin tarayıcıya yazılan alan adı, DNS sayesinde sitenin IP adresiyle eşleşir.
Bu Konuda Nasıl Destek Oluyoruz?
AdPix’in bu alandaki hizmet kapsamını ve çalışma sürecini inceleyin.
Google