İndeksleme
İndeksleme (dizine ekleme), bir arama motorunun taradığı sayfanın içeriğini işleyip arama sonuçlarında gösterilebilecek sayfaların bulunduğu veri tabanına, yani dizine eklemesidir. Dizinde yer almayan bir sayfa hiçbir aramada görüntülenmez. Taranan her sayfa dizine eklenmez; karar sayfanın teknik durumu ve içerik değerine göre verilir.
Arama motorlarında üç aşama
Google’ın bir sayfayı arama sonuçlarında göstermesi üç aşamalı bir süreçle gerçekleşir:
- Tarama (crawling): Googlebot sayfayı bağlantılar, XML site haritası veya doğrudan bildirimler aracılığıyla keşfeder ve içeriğini indirir.
- İndeksleme (indexing): Google sayfayı bir tarayıcı gibi işler (rendering); metnini, görsellerini, yapılandırılmış verisini ve JavaScript ile oluşturulan içeriğini analiz eder; sayfanın konusunu belirler, benzer sayfalar arasından asıl (canonical) sürümü seçer ve sayfayı dizine ekleyip eklememeye karar verir.
- Sıralama ve sunum (serving): Bir arama yapıldığında dizindeki sayfalar arasından sorguyla en ilgili olanlar sıralanarak gösterilir.
İndeksleme, sıralamanın ön koşuludur; dizinde yer almayan bir sayfa için sıralama söz konusu olmaz.
Dizine eklenmeme nedenleri
Google Search Console’un “Sayfalar” raporu, dizine eklenmeyen sayfaları nedenleriyle birlikte listeler. Başlıca durumlar şunlardır:
- “noindex” etiketiyle hariç tutuldu: Sayfada dizine eklenmemesini bildiren bir meta etiketi veya üst bilgi bulunur.
- Kopya sayfa: Google sayfayı başka bir sayfanın yinelenen sürümü olarak değerlendirmiş ve asıl sürümü dizine eklemiştir.
- Tarandı, şu anda dizine eklenmedi: Sayfa Google tarafından taranmış, ancak henüz dizine eklenmemiştir; bu durum tek başına belirli bir neden bildirmez.
- Keşfedildi, şu anda dizine eklenmedi: Google adresi tanımaktadır ancak henüz taramamıştır. Yeni sitelerde ve iç bağlantı yapısı zayıf bölümlerde sık görülür.
- robots.txt tarafından engellendi, sunucu hatası (5xx), bulunamadı (404): Sayfaya erişim sağlanamamıştır.
Dizine eklenmeyi etkileyen unsurlar
Dizine eklenme olasılığı; sayfanın site içinden bağlantı alması, XML site haritasında yer alması, canonical etiketlerinin tutarlılığı, sunucunun kararlı yanıt vermesi ve içeriğin özgün ve yeterli olmasıyla doğrudan ilişkilidir. Birbirine büyük ölçüde benzeyen çok sayıda sayfa üreten yapılarda, örneğin yalnızca konum adı değiştirilerek oluşturulan bölge sayfalarında, sayfaların önemli bir kısmı dizin dışında kalabilir. Her sayfanın kendine özgü bilgi içermesi, benzer sayfalar arasındaki içerik ayrımını güçlendirir. URL Denetimi aracındaki dizine ekleme isteği, adresin yeniden taranması için talep iletir; tarama zamanlaması ve dizine ekleme değerlendirmesi Google’ın sistemleri tarafından belirlenir.
Ölçüm ve araçlar
Tek bir sayfanın dizin durumu, Google Search Console’daki URL Denetimi aracıyla en doğru biçimde görülür. Araçtaki dizin verisi sayfanın Google tarafından en son işlenen sürümünü, canlı test ise güncel teknik durumunu yansıtır; iki görünümün karşılaştırılması, yayımlanan bir değişikliğin henüz işlenip işlenmediğini gösterir. Sitenin genel durumu “Sayfalar” raporunda izlenir. site:alanadi.com sorgusu dizindeki sayfaların bir bölümünü gösterir; ancak bu sorgunun verdiği sonuç sayısı yaklaşık bir değerdir ve kesin dizin büyüklüğünü yansıtmaz.