Dinamik Site Haritası Üretimi İçin Otomasyon Yaklaşımları
İçeriği her gün değişen bir sitede XML site haritasını elle güncellemek hem zaman alır hem de hataya açıktır. Silinmiş sayfalar haritada kalır, yeni yayımlanan ürünler günlerce görünmez olur. Otomasyon, haritayı sitenin gerçek durumuyla eşitlemenin en güvenilir yoludur ve doğru kurgulandığında bakım yükünü neredeyse sıfıra indirir.
Veri kaynağını doğru seçin
Otomasyonun kalitesi, URL listesini nereden çektiğinize bağlıdır. En sağlıklı kaynak, sayfaları besleyen veritabanıdır. Yayın durumu “aktif” olan, noindex etiketi taşımayan ve kendi kanonik adresine işaret eden kayıtları sorgulayın. Sitenizi tarayıp URL toplayan araçlar da işe yarar, ancak gereksiz parametreli adresleri ve yönlendirmeleri de listeye katabilir. Veritabanı sorgusunda filtreleme kurallarını açıkça yazın: 404 veren, yönlendirilen veya robots.txt ile engellenen adresler haritaya hiç girmemeli. Konuyla ilgili ayrıntılar tns-global.xyz üzerinde yer alıyor.
Üretim zamanını belirleyin
Üç temel yaklaşım vardır. Birincisi zamanlanmış görevdir: sunucuda her gece ya da saatte bir çalışan bir betik haritayı baştan üretir. Kurulumu kolaydır, küçük ve orta ölçekli siteler için yeterlidir. İkincisi olay tabanlıdır: bir içerik yayımlandığında, güncellendiğinde veya silindiğinde ilgili kayıt anında haritaya eklenir ya da çıkarılır. Haber ve ilan siteleri için idealdir. Üçüncüsü istek anında üretimdir; harita bir adrese gelen talebe göre oluşturulur. Bu yöntem güncel kalır fakat yoğun sitelerde sunucuyu yorar, bu yüzden önbellekle birlikte kullanılmalıdır.
Büyük siteler için bölme ve önbellek
Tek bir harita dosyası en fazla 50.000 URL içerebilir ve dosya boyutu sıkıştırılmamış halde 50 MB’ı geçmemelidir. Bu sınıra yaklaşan sitelerde haritayı içerik türüne göre ürünler, kategoriler, blog yazıları gibi parçalara ayırın ve hepsini bir dizin dosyasında toplayın. Bu düzen, Search Console’da hangi bölümde indeksleme sorunu olduğunu görmenizi de kolaylaştırır. Üretilen dosyaları gzip ile sıkıştırıp önbelleğe alın, yalnızca değişen parçayı yeniden oluşturun.
Lastmod ve doğrulama
Lastmod değerini yalnızca içerik gerçekten değiştiğinde güncelleyin. Her üretimde tüm tarihleri bugüne çekmek, arama motorlarının bu alana güvenmeyi bırakmasına yol açar. Veritabanındaki gerçek düzenleme tarihini kullanın. Üretim sonrasında otomatik bir doğrulama adımı ekleyin: örnek URL’lere istek atıp durum kodlarını kontrol edin, XML geçerliliğini sınayın ve URL sayısı beklenmedik biçimde düştüyse uyarı gönderin.
Haritanın adresini robots.txt dosyasına ekleyip Search Console üzerinden göndermeyi unutmayın. Ardından kapsam raporunu düzenli izleyin; otomasyon çalışıyor olsa bile filtre kurallarının zamanla gözden geçirilmesi gerekir.