Google’da bir sayfanın taranması, dizine eklenmesi ve sonuçta nasıl görüneceği aynı şey değildir. En doğru kontrol sırası: önce erişim, sonra indeksleme, en son da başlık ve snippet davranışıdır. Google’ın resmi dokümanları bu üç aşamanın farklı sinyallerle yönetildiğini açıkça ayırır.
Sorun çoğu zaman tek bir etiketle çözülmeye çalışılır. Oysa robots.txt, noindex ve title öğesi farklı işleri yapar; yanlış sırada kullanıldığında sayfayı görünmez kılabilir ya da istemeden aramada bırakabilir. Aşağıda bunu karar bazında ayırıyorum.
Bu ayrım pratikte şunu çözer: Sayfa taranıyor ama görünmüyorsa sorun indeksleme olabilir; görünür ama yanlış başlıkla çıkıyorsa sorun sunum veya başlık sinyali olabilir; hiç taranmıyorsa önce erişim ve robots kuralları kontrol edilir.
Bu yüzden şu yanılgıdan kaçınmak gerekir: “robots.txt’ye ekledim, aramadan tamamen silinir.” Eğer URL başka yerlerden bağlantı alıyorsa, Google onu yine de sonuçlarda gösterebilir. Tam dışlama gerekiyorsa uygun yaklaşım noindex, erişim kısıtlaması veya sayfanın kaldırılmasıdır.
Bunu en doğru kullandığınız yerler; benzer sayfalar, ince içerikli sayfalar, aramada görünmesi istenmeyen ama site içinde erişilebilir kalacak sayfalardır. Gizli içerik için ise noindex tek başına yeterli güvenlik katmanı sayılmaz. Google, özel içerikte şifre koruması gibi gerçek erişim kontrolünü önerir.
Bu nedenle “başlığı düzeltirsem indeks sorunu çözülür” yaklaşımı eksiktir. Başlık yalnızca sonuç sunumunu iyileştirir; sayfanın dizinde olup olmadığını belirlemez. İndeks sorunu varsa önce erişim ve noindex kontrol edilmelidir.
Özellikle büyük sitelerde, keşfedilmesi zor sayfaların bulunmasına yardımcı olur; ama zayıf, yinelenen veya engellenmiş sayfaları otomatik olarak değerli hale getirmez. Google’ın önerdiği yaklaşım, önemli sayfaları erişilebilir tutmak ve sitemap’i bu yapıyı desteklemek için kullanmaktır.
Bu ayrımı doğru kuran bir site, önce erişim sorununu, sonra indeksleme kararını, en son da başlık ve snippet kalitesini düzeltir. Böylece SEO çalışması tek bir etikete değil, gerçek arama davranışına dayanır.
Sorun çoğu zaman tek bir etiketle çözülmeye çalışılır. Oysa robots.txt, noindex ve title öğesi farklı işleri yapar; yanlış sırada kullanıldığında sayfayı görünmez kılabilir ya da istemeden aramada bırakabilir. Aşağıda bunu karar bazında ayırıyorum.
Google’da tarama, indeks ve başlık nasıl ayrılır?
Üç aşamayı doğru sırada düşünün
Tarama, Googlebot’un sayfaya erişip içeriği okumasıdır. İndeksleme, Google’ın okuduğu içeriği arama dizinine uygun görmesidir. Sunum ise sonuç sayfasında başlık, açıklama ve varsa yapılandırılmış verinin nasıl kullanıldığıdır. Google Search Central, bu sürecin tek adım olmadığını ve arama davranışını anlamak için aşamaların ayrı okunması gerektiğini söylüyor.Bu ayrım pratikte şunu çözer: Sayfa taranıyor ama görünmüyorsa sorun indeksleme olabilir; görünür ama yanlış başlıkla çıkıyorsa sorun sunum veya başlık sinyali olabilir; hiç taranmıyorsa önce erişim ve robots kuralları kontrol edilir.
robots.txt neyi yapar, neyi yapmaz?
robots.txt’nin temel görevi taramayı yönetmektir. Google, robots.txt ile engellenen bir URL’yi taramayabilir; fakat bu dosya indekslemeyi durdurmak için tasarlanmış bir araç değildir. Google ayrıca, robots.txt ile engellenen bir sayfada noindex kuralının görülemeyeceğini de açıkça belirtir.Bu yüzden şu yanılgıdan kaçınmak gerekir: “robots.txt’ye ekledim, aramadan tamamen silinir.” Eğer URL başka yerlerden bağlantı alıyorsa, Google onu yine de sonuçlarda gösterebilir. Tam dışlama gerekiyorsa uygun yaklaşım noindex, erişim kısıtlaması veya sayfanın kaldırılmasıdır.
noindex hangi durumda doğru çözümdür?
noindex, Google’a sayfayı dizine eklememesi gerektiğini söyler. Resmi dokümanlara göre sayfa erişilebilir olmalı; aksi halde Google noindex kuralını göremez. Bu nedenle noindex, taramaya açık ama arama sonuçlarında yer almaması gereken sayfalar için uygundur.Bunu en doğru kullandığınız yerler; benzer sayfalar, ince içerikli sayfalar, aramada görünmesi istenmeyen ama site içinde erişilebilir kalacak sayfalardır. Gizli içerik için ise noindex tek başına yeterli güvenlik katmanı sayılmaz. Google, özel içerikte şifre koruması gibi gerçek erişim kontrolünü önerir.
Başlık etiketi neden ayrı değerlendirilir?
öğesi, sayfanın arama sonuçlarında nasıl adlandırılacağını etkileyen güçlü bir sinyaldir; ancak tarama veya indeksleme kuralı değildir. Google, indexing aşamasında başlık öğesi gibi içerik ve meta sinyallerini işler; yine de son görünen başlık sorguya, sayfa içeriğine ve Google’ın sunum kararına göre değişebilir.Bu nedenle “başlığı düzeltirsem indeks sorunu çözülür” yaklaşımı eksiktir. Başlık yalnızca sonuç sunumunu iyileştirir; sayfanın dizinde olup olmadığını belirlemez. İndeks sorunu varsa önce erişim ve noindex kontrol edilmelidir.
XML sitemap ne zaman işe yarar?
XML sitemap, Google’a önemli URL’leri keşfetmede yardımcı olur. Ancak tek başına indeks garantisi vermez; robots.txt, noindex, erişim kısıtları ve sayfa kalitesiyle birlikte değerlendirilir. Bu yüzden sitemap’i “sıralama aracı” gibi değil, keşif ve güncelleme sinyali gibi düşünmek daha doğrudur.Özellikle büyük sitelerde, keşfedilmesi zor sayfaların bulunmasına yardımcı olur; ama zayıf, yinelenen veya engellenmiş sayfaları otomatik olarak değerli hale getirmez. Google’ın önerdiği yaklaşım, önemli sayfaları erişilebilir tutmak ve sitemap’i bu yapıyı desteklemek için kullanmaktır.
Pratik karar sırası
- Sayfa görünmemeli ama erişilebilir kalmalıysa: noindex düşünün.
- Google’ın sayfayı hiç taramaması gerekiyorsa: robots.txt ile taramayı yönetin.
- Başlık yanlış görünüyorsa: title öğesini ve sayfa içeriği uyumunu kontrol edin.
- Sayfanın bulunması zor ise: sitemap ve iç bağlantıları iyileştirin.
- İçerik özel veya gizli ise: gerçek erişim kontrolü kullanın; yalnız SEO etiketi yeterli saymayın.
En sık yapılan karışıklık
En yaygın hata, robots.txt, noindex ve title’ı tek bir “görünürlük ayarı” gibi kullanmaktır. Oysa biri taramayı, biri indekslemeyi, biri sunumu etkiler. Yanlış sırada uygulandığında sayfa ne doğru taranır ne de doğru sunulur. Google’ın resmi anlatımı, bu yüzden her sinyali kendi aşamasında değerlendirmeyi önerir.Bu ayrımı doğru kuran bir site, önce erişim sorununu, sonra indeksleme kararını, en son da başlık ve snippet kalitesini düzeltir. Böylece SEO çalışması tek bir etikete değil, gerçek arama davranışına dayanır.
| Kontrol / Durum | Anlamı / Uygulanacak Adım |
|---|---|
| robots.txt ile engel | Googlebot’un sayfayı taramasını azaltır ya da durdurur; ancak bu tek başına sayfayı dizinden çıkarmanın güvenilir yolu değildir. |
| noindex etiketi | Sayfa taranabiliyorsa Google’a sayfayı dizine eklememesi gerektiğini söyler; erişim robots.txt ile kapalıysa etki göstermeyebilir. |
| title öğesi | Dizine giren sayfanın sonuçlarda nasıl adlandırılacağını etkiler; tarama engeli veya noindex ile aynı şey değildir. |
| XML sitemap | Google’a önemli URL’leri keşfetmede yardımcı olur; tarama ve indeks garantisi vermez. |
| Erişim kontrolü | Özel veya gizli içerikte en güvenli yaklaşım, yalnızca arama sinyali değil, gerçek erişim kısıtlamasıdır. |
