Sitemap Oluşturucu: sitenizi tarayıp sitemap.xml hazırlayalım.

Sitemap oluşturucu ne yapar?

Bir arama motoru botu gibi ana sayfanızdan başlar, sayfadaki linkleri izleyerek sitenizi gezer ve bulduğu her sayfayı kontrol eder. Sonunda yalnızca dizine girmesi gereken sayfalardan oluşan, sitemaps.org standardına uygun bir sitemap.xml dosyası verir. Dosyayı indirip sitenize yüklemeniz yeterli.

Hangi sayfalar sitemap’e girer?

• Girer: 200 dönen, HTML olan, noindex taşımayan ve canonical etiketi kendisini gösteren sayfalar.
• Yönlendirmeler: sitemap’e girmez; hedef adres sitenizdeyse o taranır.
• Canonical başka adres: sayfa dışarıda kalır, canonical adres taranır.
• noindex ve hatalı sayfalar: sitemap’e girmez, ama noindex sayfadaki linkler izlenir.
• robots.txt: engellenen adresler hiç açılmaz.
• Parametreli adresler: ?sayfa=2, ?utm_source= gibi adresler varsayılan olarak dışarıda bırakılır; isterseniz dahil edebilirsiniz.
• Dosyalar: görsel, PDF, CSS, JS gibi sayfa olmayan adresler atlanır.

WordPress kullanıyorsanız

WordPress 5.5’ten beri /wp-sitemap.xml adresinde kendi sitemap’ini otomatik üretir; Yoast ve Rank Math da kendi sitemap’lerini oluşturur. Bu sitemap’ler her yeni yazıda kendiliğinden güncellenir, elle hazırlanmış bir dosyadan daha iyidir. Bu araç asıl olarak hazır sitemap’i olmayan statik ve özel kodlu siteler için. WordPress sitenizde ise bir botun linkler üzerinden hangi sayfalara ulaşabildiğini görmek için kullanabilirsiniz. Var olan sitemap’inizi kontrol etmek için Sitemap Doğrulayıcı’yı kullanın.

Sınırlamalar

Tarama en fazla 500 sayfa açar ve yalnızca girdiğiniz adresin klasörü altında kalır: ornek.com/blog/ yazarsanız sadece /blog/ ile başlayan adresler taranır. Sayfaları JavaScript çalıştırmadan okur; linkleri yalnızca JavaScript ile oluşan sitelerde sonuç eksik çıkar. Hiçbir sayfadan link almayan (yetim) sayfaları bulamaz. Aynı kişi saatte en fazla 4 tarama başlatabilir.

Tarama kuralları; yalnızca aynı site ve başlangıç adresinin altındaki linkleri izleme, sayfa olmayan dosya türlerini atlama, # parçalarını temizleme, meta robots noindex ve nofollow’a uyma ve sitemap’e yalnızca başarılı HTML sayfalarını alma, N. Rusch’un açık kaynak sitemap-generator projesinden (MIT lisansı) uyarlanmıştır. Emeği için teşekkürler.