Google’da bir sayfanın görünmemesi robots.txt, noindex ve canonical ile nasıl ayırt edilir?

Bir sayfanın Google’da görünmemesi çoğu zaman tek bir sorun değildir; robots.txt engeli, noindex etiketi ve canonical seçimi farklı şeylerdir. Doğru sırayla bakarsanız sayfanın neden dışarıda kaldığını hızlıca ayırabilir ve yanlış düzeltme yapmazsınız.

Bu yazı, Search Console’daki URL Inspection ve Page indexing raporlarını temel alarak hangi sinyalin ne anlama geldiğini açıklar. Amaç, görünmeme nedenini önce tarama, sonra indeksleme, sonra da canonical seçimi üzerinden netleştirmektir.

Google’da görünmeyen bir sayfayı teknik sinyallere göre nasıl ayırırsınız?​

Bir URL’nin neden görünmediğini anlamanın en güvenli yolu, önce Google’ın sayfaya ulaşabildiğini, sonra indekslemeye izin verilip verilmediğini, en son da doğru canonical sürümün seçilip seçilmediğini kontrol etmektir. Bu üç adım aynı görünse de aynı şey değildir; biri taramayı, biri indekslemeyi, biri de tercih edilen adresi ilgilendirir.

İlk ayrım: Google sayfayı hiç tarayabiliyor mu?​

robots.txt engeli varsa Googlebot sayfayı isteyemez. Bu durumda noindex veya canonical gibi içerik içi sinyallerin önemli kısmı görünmez; önce erişim engelini kaldırmak gerekir. Bu yüzden teşhisin ilk sorusu, sayfanın teknik olarak ulaşılabilir olup olmadığıdır.

robots.txt engeli neyi değiştirir?​

robots.txt, tarama trafiğini yönetir. Sayfayı blokluyorsanız Google içeriği okuyamaz; yani indeksleme sinyallerini yorumlayacağı aşamaya hiç gelemez. Bu nedenle robots.txt ile gizlemeye çalışmak, görünmemeyi çözmek yerine sebebi belirsizleştirebilir.

Görüntülenen ama taranamayan sayfada ne olur?​

Bir URL başka yerlerden keşfedilmiş olabilir, ancak erişim engeli yüzünden ayrıntıları okunmayabilir. Böyle bir durumda Search Console’da görünen başlık, gerçek durumun tamamı değildir; asıl kontrol, URL Inspection içindeki tarama durumu ve engel bilgisidir.

İkinci ayrım: Sayfa taranıyorsa indekslenmeye izin var mı?​

Sayfa taranabildiği halde yine de indekslenmeyebilir. Burada belirleyici işaret noindex’tir. Noindex, sayfanın arama sonuçlarına eklenmemesini ister; robots.txt’den farklı olarak tarama sonrası indeksleme kararını etkiler.

noindex ne zaman doğru çözümdür?​

İndekste görünmesini istemediğiniz, ama Google’ın okuyabildiği sayfalarda noindex kullanılır. Bu yaklaşım, arama motoruna sayfayı gör ama sonuçlara koyma demektir. Erişimi engellemek değil, görünürlüğü sınırlamak için kullanılır.

robots.txt ile noindex neden birbirinin yerine geçmez?​

Google, robots.txt ile engellenen bir sayfada noindex gibi sinyalleri göremez. Bu yüzden önce engel varsa onu kaldırmak, sonra indeksleme kararını noindex ile vermek daha doğrudur. İkisini ters sırayla uygulamak, teşhisi ve düzeltmeyi zorlaştırır.

Üçüncü ayrım: Google doğru canonical adresi mi seçti?​

Aynı içeriğin birden fazla URL’si varsa problem her zaman indeksleme değildir. Google, benzer sayfalar arasında bir canonical sürüm seçebilir. Yanlış URL’nin esas alınması, sayfanın aslında indekslenmiş olmasına rağmen beklenen adresin görünmemesine yol açabilir.

canonical neyi çözer?​

Canonical, benzer ya da yinelenen URL’lerde hangi adresin tercih edilmesi gerektiğini işaret eder. Bu, noindex gibi “sonuçlarda görünme” komutu değil; daha çok “bu kümeyi temsil eden adres budur” demektir. Yanlış canonical seçimi çoğu zaman teknik hata sanılır.

noindex ile canonical neden karıştırılmamalı?​

Google, tek bir site içinde canonical seçimini engellemek için noindex kullanmanızı önermiyor; çünkü bu, sayfayı Search’ten tamamen çıkarabilir. Eğer amaç aynı içeriğin doğru sürümünü öne çıkarmaksa canonical daha uygun bir işarettir.

Search Console’da hangi rapora önce bakılır?​

Tekil bir adres için en faydalı araç URL Inspection’dır; tarandı mı, indekslenebilir mi, seçilen canonical ne, bunları aynı yerde görmek istersiniz. Toplu durum için Page indexing raporu daha uygundur; dışlama nedenlerini ve örüntüleri burada ayırabilirsiniz.

URL Inspection ne zaman yeterlidir?​

Tek bir sayfanın neden görünmediğini araştırıyorsanız, önce URL Inspection’dan başlayın. Bu araç, tek URL’nin canlı durumunu görmenizi sağlar ve sorunun tarama mı, indeksleme mi, canonical mı olduğunu kısa yoldan anlamaya yardım eder.

Page indexing raporu ne zaman daha yararlı olur?​

Benzer sorun birden fazla sayfada tekrar ediyorsa Page indexing raporu daha değerlidir. Burada robots.txt, noindex ve duplicate gibi dışlama nedenlerinin hangi grupta toplandığını görürsünüz. Bu, tekil hata ile sistematik sorun arasındaki farkı ortaya çıkarır.

Aynı sorunu yanlış çözmemek için kısa karar sırası​

Önce robots.txt engeli var mı bakın. Varsa sayfa taranamaz ve diğer sinyaller ikinci plana düşer. Engel yoksa noindex kontrol edin. Sayfa taranabiliyor ve noindex yoksa canonical seçimini inceleyin. Bu sıra, sorunları üst üste bindirmek yerine ayırır.

Hangi işaret neyi anlatır?​

robots.txt, Google’ın sayfaya erişip erişemeyeceğini söyler. noindex, sayfanın indekslenip indekslenmemesi gerektiğini söyler. canonical ise benzer sayfalar arasında hangi adresin esas alınacağını söyler. Üçü aynı hedefe hizmet etmez; farklı sorulara cevap verir.

Neden crawl bütçesi de hesaba katılmalı?​

Gereksiz URL’lere çok tarama harcanırsa önemli sayfaların keşfi gecikebilir. Bu nedenle büyük sitelerde görünmeme sorununu sadece tek sayfanın etiketi gibi değil, genel tarama verimliliği olarak da düşünmek gerekir. Özellikle yinelenen URL üretimi varsa crawl bütçesi etkilenebilir.

Tablodaki farkları pratikte nasıl okursunuz?​

Aşağıdaki özet, hangi sinyalin hangi problemi anlattığını hızlıca ayırmak için kullanışlıdır. Tek bir satır sizi sonuca götürmez; ama teşhis sırasını düzgün kurmanızı sağlar.

Önce engeli, sonra indekslemeyi, sonra canonical’ı kontrol edin​

robots.txt bir erişim engelidir; noindex bir indeksleme talimatıdır; canonical bir tercih işaretidir. Bunlardan birini yanlış yorumlamak, düzeltmeyi yanlış katmana taşıyabilir. Doğru sıra, özellikle WordPress filtreleri, parametreli URL’ler ve benzer içerik kümelerinde çok işe yarar.

Son adımda ne yapmamalısınız?​

Tek bir dışlama nedeni gördüğünüzde diğer olasılıkları atlamayın. Sayfa taranabiliyorsa ama görünmüyorsa canonical veya noindex; taranamıyorsa robots.txt ilk şüphelidir. Bu ayrım yapılmadan içerik yenilemek ya da dahili link artırmak çoğu zaman sorunu çözmez.