Robots.txt'ye Sitemap Nasıl Eklenir?

Robots.txt dosyasına Sitemap direktifi eklemek, arama motorlarına site haritanızın konumunu bildirmenin standart yoludur. Sitemap satırı olmadan botlar sitemap'inizi yine bulabilir; ancak doğrudan referans indeksleme sürecini hızlandırır. Bu rehberde doğru format ve adımları açıklıyoruz.

Sitemap direktifi, robots.txt'in herhangi bir yerinde olabilir; ancak genellikle dosyanın sonunda yer alır. Tek bir sitemap veya sitemap index dosyası belirtebilirsiniz. Birden fazla sitemap varsa her biri için ayrı satır yazılır.

Doğru Format

Standart sözdizimi şöyledir:

User-agent: *
Allow: /
Sitemap: https://www.siteniz.com/sitemap.xml

Önemli kurallar: Sitemap URL'i tam ve mutlak olmalıdır (https ile başlamalı). Göreli yol kullanılamaz. Sitemap index kullanıyorsanız:

Sitemap: https://www.siteniz.com/sitemap_index.xml
Sitemap: https://www.siteniz.com/sitemap-products.xml

Yaygın Hatalar

HTTP kullanmak, HTTPS kullanılmıyorsa sorun çıkarabilir. HTTP'den HTTPS'e yönlendirme yapılandırılmışsa sitemap URL'lerinde de HTTPS kullanın. WWW vs non-WWW tercihinize uygun domain kullanın. Site adresiniz www ile başlıyorsa sitemap URL'i de www içermelidir.

Robots.txt nedir temellerini öğrenin. Sitemap.xml nedir sayfası sitemap yapısını açıklar. Büyük siteler için sitemap index kullanımı önerilir. Robots sitemap'ı görmüyor sorunu yaşıyorsanız bu adımları kontrol edin.

Aracı Aç → /arac/
Bu araç kontrolleri tarayıcıda yapar; sonuçlar sunucu yapılandırmasına göre değişebilir. Kesin sonuçlar için sunucu loglarını ve Google Search Console verilerini de kontrol edin.