Hangi sayfalar Google’da dizine alınmamalı

Google’da dizine alınmaması gereken sayfalar, genelde arama değeri üretmeyen ama siteyi şişiren URL’lerdir; doğru ayrım yapılırsa gereksiz indeks, kopya içerik ve tarama israfı azalır.

Bu yazı, bir sayfanın gerçekten kapatılması mı gerektiğini, yoksa sadece taramaya açık kalıp indeks dışında mı tutulmasının daha doğru olduğunu anlatır. Robots.txt, noindex, canonical ve sitemap’in birbirinden nasıl ayrıldığını da bu kararın parçası olarak ele alır.

İndeks dışı bırakılacak sayfayı nasıl seçersiniz?​

Bir URL’yi kapatma kararı, yalnızca teknik bir tercih değildir; o sayfanın arama amacı taşıyıp taşımadığına bakarak verilir. Ürün filtreleri, iç arama sonuçları, tekrarlanan etiket sayfaları, oturum parametreleri ve geçici kampanya URL’leri çoğu zaman arama sonucunda tek başına değer üretmez. Buna karşılık, kullanıcıların doğrudan arayabileceği açıklayıcı sayfalar, destek içerikleri ve özgün ürün sayfaları genellikle açık kalmalıdır.

Buradaki temel soru şudur: Bu URL tek başına indekslenirse kullanıcıya gerçek bir fayda sağlar mı? Cevap hayırsa, sonraki adım hangi yöntemin uygun olduğunu ayırmaktır. Bu ayrımda hedef, her sayfayı aynı biçimde kapatmak değil, sayfanın rolüne uygun sinyali vermektir.

robots.txt, noindex ve canonical aynı iş için kullanılmaz​

robots.txt taramayı sınırlamak için kullanılır; sayfanın bulunmasını yavaşlatabilir ama tek başına dizinden çıkarma garantisi vermez. Bu yüzden, bir URL’nin arama sonucunda görünmesini istemiyorsanız robots.txt ilk ve tek araç olmamalıdır. Crawl Stats raporu da Google’ın gerçekten hangi URL’leri istediğini gösterdiği için, tarama davranışını okumadan karar vermek yanıltıcı olabilir.

noindex, sayfanın dizine eklenmemesi için daha doğrudan bir sinyaldir. Ancak bu etiketi eklemek, sayfanın taranmasının tamamen gereksiz olduğu anlamına gelmez; bazı durumlarda Google önce sayfayı görüp sonra dizin dışında bırakır. Canonical ise benzer URL’ler arasında tercih edilen sürümü belirtir; yinelenen içerikte doğru sürümü birleştirmek için yararlıdır, fakat indeksleme kararını tek başına kapatma aracı gibi düşünmemek gerekir.

Hangi durumlarda sayfayı açık bırakmak daha doğrudur?​

Bir sayfa düşük trafik alıyor diye otomatik olarak kapatılmamalıdır. Eğer sayfa başka sayfalardan daha iyi bir arama niyeti yakalıyorsa, önemli iç bağlantılar alıyorsa veya başka bir sayfanın yerini dolduruyorsa indeks değeri olabilir. Özellikle ürün varyantları, kategori sayfaları ve yerel açılış sayfalarında karar, yalnız teknik ölçüte değil, arama sonucu potansiyeline de dayanmalıdır.

Sitemap burada yalnızca öncelikli URL’leri bildiren bir yardımcıdır. İndekslenmesini istemediğiniz URL’leri listelemek için sitemap kullanmak doğru yaklaşım değildir. Aynı şekilde canonical etiketi, ‘bu sayfayı kapat’ demek yerine ‘bu içerik grubunda tercih edilen adres budur’ mesajı verir. Yani doğru karar çoğu zaman tek bir etiket değil, sayfanın işlevine göre kurulmuş bir kombinasyondur.

Pratik karar sırası nasıl kurulmalı?​

Önce sayfanın arama değeri var mı, bunu sorun. Sonra benzer içeriklerle çakışıyor mu, gereksiz parametre içeriyor mu, kullanıcı için yalnız iç gezinmede mi işe yarıyor, buna bakın. Ardından uygun yöntem seçilir: gerçekten görülmesini istemediğiniz sayfa için noindex, sadece keşfi sınırlanacak alan için robots.txt, benzer sürümleri birleştirmek için canonical.

Bu sıra, gereksiz URL’leri azaltırken yanlışlıkla önemli sayfaları kapatma riskini düşürür. En güvenli yaklaşım, arama sonucu değeri olan sayfaları açık tutmak; değeri olmayan ama site yapısı için gerekli sayfalarda ise doğru sinyali vermektir. Böylece indeks bütçesi, gerçekten görünmesi gereken URL’lere ayrılır.