Google’da bir sayfayı gizlemek, taramayı durdurmak ve başlık bağlantısını korumak aynı şey değildir. En güvenli ayrım şudur: robots.txt taramayı keser, noindex indekslemeyi engeller, title link ise Google’ın sonuçta göstereceği başlığı belirlemeye yardımcı olur; fakat sayfaya erişim yoksa Google bunu her zaman kullanamaz.
Bu yüzden yanlış yapılandırma, arama sonucunu beklediğinizden farklı hale getirebilir: sayfa engellenmişse noindex okunmaz, erişim açık ama noindex varsa sayfa sonuçlardan çıkar, başlık metni de sayfa içeriği okunabildiği ölçüde güvenilir olur. Aşağıdaki ayrım, hangi durumda hangi etiketin kullanılacağını netleştirir.
noindex: Sayfayı arama sonuçlarından çıkarmak için.
title link: Sonuçta gösterilecek başlığı güçlendirmek için; ama erişim yoksa etkisi sınırlı olabilir.
Bu yüzden yanlış yapılandırma, arama sonucunu beklediğinizden farklı hale getirebilir: sayfa engellenmişse noindex okunmaz, erişim açık ama noindex varsa sayfa sonuçlardan çıkar, başlık metni de sayfa içeriği okunabildiği ölçüde güvenilir olur. Aşağıdaki ayrım, hangi durumda hangi etiketin kullanılacağını netleştirir.
Tarama, indeksleme ve başlık sinyalini ayırın
robots.txt neyi yapar, neyi yapmaz?
robots.txt bir tarama kontrolüdür. Google’ın sayfayı istemediğiniz yüklemesini azaltır; fakat tek başına “arama sonuçlarından kaldırma” talimatı değildir. Sayfa dış bağlantılardan keşfedilirse, Google URL’yi yine de dizinde tutabilir veya en azından URL düzeyinde gösterebilir. Bu nedenle robots.txt, görünürlükten çok erişim kontrolü için düşünülmelidir.noindex ne zaman doğru seçimdir?
noindex, Google’a sayfayı sonuçlarda göstermemesini söyler. Ancak bunun çalışması için Google’ın sayfayı tarayabilmesi gerekir. Sayfa robots.txt ile kapalıysa, noindex etiketi görülmez ve amaçlanan etki oluşmaz. Bu yüzden “sayfayı aramadan kaldırmak ama yine de kontrolü elinde tutmak” istiyorsanız önce erişimi açık bırakıp noindex kullanmanız gerekir.Başlık bağlantısı neden beklediğiniz gibi çıkmayabilir?
Google, başlık bağlantısını yalnızca `` etiketine körü körüne bağlı üretmez; sayfa dili, yazı sistemi, görünür başlık düzeni ve erişebildiği içerik buna etki eder. Eğer sayfa içeriğini tarayamıyorsa, off-page metinler veya bağlantı metinleri gibi başka kaynaklara daha fazla dayanabilir. Bu yüzden title link optimizasyonu, erişim engeliyle birlikte planlanmalıdır.Hangi kombinasyon hangi sonucu verir?
Sayfayı korumak, ama aramada göstermemek
İçeriğin kullanıcıya açık kalmasını istemiyor, fakat Google’ın sonucu göstermesini de istemiyorsanız temel yol noindex’tir. robots.txt ile kapatmak yerine sayfayı erişilebilir bırakıp noindex uygulamak, Google’ın talimatı okumasını sağlar. Bu yöntem özellikle geçici kampanya sayfaları, iç arama sonuçları ya da tekrar eden içeriklerde daha tutarlı çalışır.Tarama bütçesini azaltmak, ama dizini kontrol etmek
Eğer amaç yalnızca gereksiz taramayı kısmaksa robots.txt işe yarar; fakat bu, indeks kontrolüyle aynı hedef değildir. Bu ayrım önemlidir çünkü tarama azalınca Google, sayfadaki noindex veya benzeri yönergeleri görmeyebilir. Yani “kapalı ama kontrol altında” bir yapı istiyorsanız yalnız robots.txt’ye güvenmek doğru yaklaşım değildir.Başlık bağlantısını temiz tutmak için neye bakılır?
Title link’in kaliteli çıkması için sayfanın ana başlığının belirgin, dilinin tutarlı ve görünür içeriğinin net olması gerekir. Tek başına uzun `` yazmak garanti vermez; Google gerekirse sonucu kısaltır ya da başka bir metin kullanır. Bu yüzden başlık çalışması, sayfa erişimi ve içerik hiyerarşisiyle birlikte ele alınmalıdır.Uygulamada kontrol sırası nasıl kurulmalı?
Önce erişim durumunu okuyun
Search Console’daki URL denetimi, “crawl allowed” ve “indexing allowed” ayrımını görmenize yardım eder. Bu ayrım, sorunun robots.txt kaynaklı mı yoksa noindex kaynaklı mı olduğunu ayırt etmek için en kısa yoldur. Özellikle robots.txt engeli varsa Google noindex’i göremeyeceği için yanlış teşhis yapmamak gerekir.Sonra görünürlük kararını verin
Sayfanın aramada kalması istenmiyorsa noindex, tarama yükü azaltılacaksa robots.txt, ikisi birden gerekiyorsa önce sayfanın erişilebilir olup olmadığını kontrol eden bir sıra kurmak gerekir. Bu sıralama, bir etiketin diğerini görünmez kılmasını önler. En kritik hata, “gizlemek” ile “indekslemeyi durdurmak” kavramlarını tek ayar sanmaktır.Kısa karar ölçütü
robots.txt: Tarama yükünü azaltmak için.noindex: Sayfayı arama sonuçlarından çıkarmak için.
title link: Sonuçta gösterilecek başlığı güçlendirmek için; ama erişim yoksa etkisi sınırlı olabilir.
| Durum / kontrol | Anlamı / uygulanacak adım |
|---|---|
| robots.txt engeli var | Google sayfayı tarayamaz; bu yüzden noindex veya diğer sayfa içi talimatlar görülemez. |
| noindex erişilebilir sayfada | Sayfa taranabiliyorsa Google’a dizine eklememe talimatı net biçimde iletilir. |
| Başlık bağlantısı beklenenden farklı | Google, erişim kısıtlıysa title link’i sayfa içi başlıktan değil başka metinlerden oluşturabilir. |
| Sayfayı aramadan kaldırmak istiyorsanız | robots.txt ile kapatmak yerine önce erişimi açık tutup noindex uygulamak gerekir. |
| Tarama istiyor ama indeks istemiyorsanız | robots.txt ile engellemeyin; sayfayı erişilebilir bırakıp noindex kullanın. |
| Görünürlük kontrolünü doğrulamak istiyorsanız | Search Console URL denetimi ile crawl allowed ve indexing allowed durumunu ayrı okuyun. |
