Googlebot’ları bazı web sayfaları silinmiş olmasına rağmen tekrar taramaya gelirler.
Bunlar 410 komutu (sayfa silindi komutu) verildiğinde dahi hatta noindex işaretli olsalar bile tarayabilirler.
Fakat bir migration (site taşıma, yapısal değişiklik) vb. durumlarda eski url’leri index’e dahil edebilir.
Bu da Google’un tarama bütçesini efektif kullanması için yapmış olduğu Google sunucularında saklanan silinmiş linkleri hafızasına kaydetmesiyle gerçekleşir.
Migration gibi durumlarda Google, site haritasında bulamadığı eski linkleri keşfedemediği zaman hafızasındaki linkleri tekrar index’e dahil eder.
Bu çok uzun sürmese de yüksek hitli ve marka değeri yüksek sitelerin tarama bütçesine ve sıralamalarının düşmesine sebep olabilir.
Not: Googlebot Tarama Hafızası yaptığım testler üzerine keşfettiğim bir teoridir. Google’un bu konuda bir açıklaması bulunmamaktadır.
SEO Nedir? içeriğimi okumak ister misiniz?