Google’da görünmeyen bir sayfada önce hangi sinyal kontrol edilmeli

Google’da görünmeyen bir sayfa için önce robots.txt, noindex ve canonical’ı kontrol etmek, sorunun tarama mı indeksleme mi yoksa tercih edilen URL seçimi mi olduğunu hızlıca ayırır. Bu ayrım yapılmadan yapılan düzeltmeler çoğu zaman yanlış yere dokunur ve aynı sorunu açık bırakır.

Bu yazı, bir sayfanın Google’da neden görünmediğini adım adım değil, doğru sırayla okumanızı sağlar: önce Google sayfaya erişebiliyor mu, sonra indekslemeye izin var mı, en son da Google’ın başka bir URL’yi tercih etmesine yol açan sinyaller var mı buna bakılır.

Önce hangi sinyalin sorunu çıkardığını ayırın​

Bir sayfa Google’da görünmüyorsa ilk soru şudur: Google sayfayı tarayabiliyor mu, tarasa bile indeksleyebiliyor mu, yoksa başka bir URL’yi mi seçiyor? Bu üçü aynı sorun değildir. robots.txt taramayı, noindex indekslemeyi, canonical ise tercih edilen URL’yi etkiler. Google’ın URL Inspection aracı da bu yüzden Crawl allowed?, Indexing allowed? ve Page fetch gibi alanları ayrı gösterir.

Bunu yanlış okursanız, örneğin robots.txt engelini noindex sanırsanız, çözüm de yanlış olur. Google dokümanları, robots.txt’nin esasen tarama erişimini yönettiğini; noindex’in ise sayfanın sonuçlarda görünmemesini sağladığını açıkça ayırır. Canonical da ayrı bir karardır: aynı içeriğin birden çok URL’si varsa Google’a tercih edilen adresi anlatır.

robots.txt neyi kontrol eder, neyi kontrol etmez​

robots.txt dosyası Googlebot’un hangi URL’lere erişebileceğini belirler. Yani ilk işlevi tarama trafiğini yönetmektir. Google’ın kendi açıklamasına göre robots.txt, bir sayfayı gizlemenin aracı değildir; sayfayı Google Search sonuçlarından uzak tutmak istiyorsanız noindex, parola koruması veya sayfayı kaldırma gibi yöntemler gerekir.

Buradaki kritik ayrım şudur: robots.txt ile engellenen bir sayfa yine de başka yerlerden keşfedilirse URL olarak indekslenebilir, hatta içerik görünmeden listelenebilir. Bu yüzden “robots.txt kapalıysa kesin görünmez” gibi bir varsayım doğru değildir. Önce tarama erişimini, sonra indeksleme iznini ayrı ayrı okumak gerekir.

noindex ve canonical neden aynı kontrol listesine yazılmamalı​

noindex bir sayfanın Google tarafından indekslenmemesini söyler. Google Search Console belgeleri, bu işaretin sayfayı sonuçlardan dışladığını ve URL Inspection’da Indexing allowed? alanında görülebileceğini belirtir. Bu yüzden sayfanın hiç görünmemesi sorununda noindex, robots.txt’den farklı bir ihtimali temsil eder.

canonical ise indekslemeyi doğrudan kapatmaz; benzer URL kümelerinde Google’a hangi adresin ana sürüm olduğunu anlatır. Google, aynı sayfa için çelişen canonical işaretleri kullanmamayı özellikle önerir. Bu yüzden bir sayfanın Google’da görünmemesi bazen “engellendi” değil, “başka URL seçildi” problemidir.

Önce erişimi, sonra görünürlüğü okuyun​

İş sırası pratikte şöyledir: önce Crawl allowed? alanına bakın. Burada hayır görüyorsanız sorun tarama katmanındadır. Sonra Indexing allowed? alanına bakın. Bu hayır ise sayfa taranmış olsa bile indekslenmiyordur. En son Page fetch ve canonical alanlarıyla, Google’ın sayfayı alırken hata yaşayıp yaşamadığını veya başka bir URL’yi tercih edip etmediğini kontrol edin.

Bu sırayı korumanın faydası şudur: aynı sayfaya birden çok düzeltme uygulamak yerine, sorunun hangi katmanda olduğunu netleştirirsiniz. Google’ın URL Inspection ve Crawl Stats belgeleri de tam olarak bu yüzden var; biri tek sayfayı, diğeri sitenin genel tarama davranışını gösterir.

Sitemap tek başına çözüm değildir​

Sitemap, Google’a taramak istediğiniz URL listesini verir; fakat bir URL’nin kesin indeksleneceği anlamına gelmez. Google ayrıca canonical sinyallerini, robots.txt engellerini ve sayfanın fetch durumunu da değerlendirir. Bu nedenle sitemap’i yalnızca “bildirim” olarak düşünmek gerekir, çözüm olarak değil.

Ayrıca Google dokümantasyonu, sitemap’te verilen URL’lerin mutlak ve tercih edilen sürüm olmasını önerir. Farklı canonical hedefleri, farklı sitemap URL’leri ve yönlendirme zincirleri bir araya gelirse Google’ın hangi sürümü seçtiğini okumak zorlaşır.

Tek sayfa sorunu ile site geneli sorunu ayırın​

Bir URL’nin görünmemesi her zaman tekil bir hata değildir. Bazen problem o sayfada, bazen de sitenin geneline yayılan bir erişim veya tarama baskısı sorunudur. Crawl Stats raporu burada önemlidir; Google’ın tarama geçmişini, yanıt sürelerini ve dosya türlerine göre davranışını gösterir. Bu, tek sayfa teşhisini destekleyen arka plan sinyalidir.

Site genelinde yavaş yanıt, tarama kapasitesini etkileyebilir; tek sayfada noindex ya da canonical yanlışlığı ise yalnızca o URL’yi etkiler. Sorun tekilse URL Inspection, yaygınsa Crawl Stats daha anlamlıdır. Bu ayrım yapılmadan hazırlanan SEO düzeltmeleri çoğu zaman gereksiz genişler.

Karar vermek için kısa ayrım tablosu​

İki sayfa birbirine benziyorsa hangi URL’nin ana sürüm olduğunu canonical belirler. Sayfa taranmıyorsa robots.txt kontrol edilir. Taranıyor ama görünmüyorsa noindex aranır. Sadece Google’ın seçimi karışıyorsa sitemap ve canonical birlikte okunur.

Doğru okuma sırası, sayfayı hızla görünür hale getirmekten çok, yanlış müdahaleyi önler. Özellikle robots.txt ile noindex’in karıştırılması, en sık boşa giden SEO düzeltmelerinden biridir.

Son kontrol: aynı soruyu daha sonra tekrar üretmeyin​

Eğer URL Inspection’da crawl allowed hayırsa önce robots.txt’yi, indexing allowed hayırsa noindex’i, canonical uyumsuzsa tercih edilen URL sinyallerini düzeltin. Ardından canlı testle son durumu yeniden kontrol edin; çünkü Google’ın son gördüğü sürüm, değişiklik yaptığınız sürüm olmayabilir.