Site haritası kullanımı kapıcınız olan robots.txt
dosyasında çoğunlukla yer alan bir fonksiyondur. Bir soyağacı gibidir. Yani bot bu haritaya bakarak
hangi katlarda kimin olduğunu mutlak suretle bilir. Hatta site haritasında
bot'un ne sıklıkta gelebileceği, Ayşe teyzenin çayını içebileceğini,
kurabiyesini yiyeceğini bile belirtilebilir. Ya da üst katta oturan Anastasia’ya
bile uğrayabilir; bazı geri dönüşler alabilir;
"Sen vermek 0.6 priority, ben gelmek her
gün."
İşte bu noktada sorulması gereken bazı sorular vardır;
İşte bu noktada sorulması gereken bazı sorular vardır;
·
Site haritası XML formatına uygun düzenlenmiş mi? (Artık bu şablonlar
otomatik olarak oluşturuluyor, yine de dikkat etmek lazım.)
·
Site haritası Google Webmaster Tools'a gönderilmiş mi?
·
Site haritasında olmayan sayfaları(Misal siz “İletişim” diye bir sayfa
eklersiniz ama site haritasında göremezsiniz) görebiliyor musunuz? (Aslında
haritanız güncel mi değil mi onu sormak lazım.)
·
Crawl analizinde gözükmeyen sayfalar site haritasında yer alıyor mu? (Eğer
alıyorsa site içinden en azından bir external backlink vermekte fayda var.)
