Google optimizasyonu için sitenizi taranabilir ve indekslenebilir hale getirme

Google optimizasyonunda ilk kazanç, sayfanın önce Google tarafından erişilebilir olmasıdır; robots.txt, noindex, 200 yanıtı ve indekslenebilir içerik aynı sonuca hizmet etmez. Teknik temeli doğru kurduğunuzda tarama israfı azalır, önemli sayfalar daha tutarlı sinyal alır ve görünürlük sorunlarını ayırmanız kolaylaşır.

Bu yazı, Google’ın bir sayfayı tarayıp indekslemeye uygun görmesi için hangi teknik şartlara baktığını, hangi araçların neyi kontrol ettiğini ve yanlış yapılan müdahalelerin neden ters etki yaratabildiğini açıklar. Ayrıca crawl budget, canonical mantığı ve sayfa deneyimi gibi katmanların birbirine nasıl bağlandığını, ama birbirinin yerine geçmediğini pratik olarak ayırır.

Google optimizasyonunda tarama ve indeksleme temeli​

Google’a uygun teknik temel, önce erişim sonra indeksleme, en son da sinyal kalitesi sırasıyla düşünülmelidir. Sayfa erişilemiyorsa, diğer iyileştirmeler çoğu zaman görünürlük üretmez.

Googlebot’un sayfaya ulaşması neden ilk adımdır​

Google Search Central’a göre bir sayfanın indekslenebilir sayılması için Googlebot’un engellenmemesi, sayfanın 200 yanıt vermesi ve indekslenebilir içerik sunması gerekir. Bu üçlü birlikte düşünülmeden yapılan SEO müdahalesi, özellikle yeni sayfalarda yanlış teşhise yol açar. Bir sayfa teknik olarak açık değilse, içerik kalitesi güçlü olsa bile arama motoru onu yeterince değerlendiremeyebilir.

Burada kritik ayrım şudur: Sayfa erişilebilir değilse sorun taramadadır; erişilebilir ama görünmüyorsa sorun indeksleme, kalite değerlendirmesi veya kanonik seçimde olabilir. Bu ayrımı yapmadan başlık, içerik ya da bağlantı çalışmasıyla ilerlemek çoğu zaman boşa emektir.

robots.txt ne işe yarar, ne işe yaramaz​

robots.txt dosyası crawler’a hangi URL’leri ziyaret edebileceğini söyler. Ancak bu dosya, bir sayfayı Google sonuçlarından gizlemek için tasarlanmamıştır. Yani taramayı sınırlayabilir, ama indeksin kendisini tek başına temizlemez. İndeks dışı bırakmak istiyorsanız noindex ya da parola koruması gibi ayrı bir mekanizma gerekir.

Bu fark özellikle çok büyük sitelerde önemlidir. Gereksiz klasörleri robots.txt ile taramadan uzaklaştırmak, tarama bütçesini daha değerli sayfalara yönlendirebilir. Fakat zaten indekslenmiş bir sayfayı yalnız robots.txt ile kapatırsanız, URL’nin sonuçlarda kalması veya eski sinyallerin bir süre görünmesi mümkündür.

Tarama bütçesini boşa harcamadan önemli sayfaları öne çıkarma​

Tarama bütçesi, her URL’ye eşit davranan soyut bir sayı değildir; Google’ın siteyi nasıl tarayacağını belirleyen verimlilik ve ihtiyaç dengesidir. Google, düşük kaliteli ya da gereksiz çok sayıda sayfanın yalnızca hızlı açılmasıyla taramayı artırmaz; daha değerli içerik gördüğünde ise daha fazla tarama isteği oluşabilir.

Bu yüzden hedef, “daha çok sayfa” değil, “daha az sürtünme” olmalıdır. Tekrarlayan URL’leri azaltmak, yönlendirme zincirlerini sadeleştirmek, gereksiz parametreleri kontrol etmek ve site haritasını güncel tutmak bu mantıkla çalışır. Özellikle büyük kataloglarda küçük teknik hatalar, önemli sayfaların geç keşfedilmesine neden olabilir.

Hangi sinyal taramayı gerçekten kolaylaştırır​

Google’ın kendi rehberleri, yeni veya güncellenen sayfaların keşfi için güncel sitemap, doğru robots kuralları ve sunucu tarafında tutarlı yanıtların önemini vurgular. Eğer Googlebot sık sık hata alıyorsa, sorun çoğu zaman içerikten önce altyapıdadır. Sunucu kapasitesi, erişim sınırları ve yanlış engeller tarama hızını düşürebilir.

Bu noktada en faydalı yaklaşım, sayfa türlerini ayırmaktır: değerli içerik, filtre sayfaları, tekrar eden listeler, oturum parametreleri ve arama sonuç sayfaları aynı muamele görmemelidir. Her biri için farklı kontrol gerekir; hepsine aynı çözümü uygulamak crawl bütçesini iyileştirmek yerine karmaşa üretebilir.

Canonical etiketi hangi durumda işe yarar​

Canonical, aynı ya da çok benzer içerikler arasında Google’a tercih edilen URL’yi işaret etmek için kullanılır. Bu etiket, taramayı tamamen engellemez; esas olarak kopya ve yakın kopya sayfalar arasındaki sinyali toplulaştırmaya yardım eder. Bu yüzden canonical, robots.txt ile aynı sorun için kullanılmaz.

Uygulamada canonical’ın değeri, özellikle ürün varyasyonları, filtreli listeler ve farklı URL yapılarının aynı içeriği göstermesi durumunda artar. Ancak canonical yanlış seçilirse, Google’ın önemli sayfayı başka bir adrese yığmasına yol açabilirsiniz. Yani canonical, “temizleme” aracı değil, “birleştirme” aracıdır.

Sayfa deneyimi ve Core Web Vitals neden tek başına yetmez​

Core Web Vitals, gerçek kullanıcı deneyimini ölçen sinyaller üzerinden loading, interactivity ve visual stability tarafını ele alır. Google, iyi Core Web Vitals sonuçlarını tavsiye eder; ancak bunun üst sıraları garanti etmediğini de açıkça söyler. Yani performans iyileştirmesi önemlidir, fakat sıralama problemi yalnız bununla çözülmez.

Bu ayrım özellikle performans araçları iyi sonuç verdiğinde yanılgı yaratır. Hızlı bir sayfa, içerik zayıfsa ya da arama niyetiyle uyuşmuyorsa yine geride kalabilir. Buna karşılık güçlü içerik, zayıf deneyim yüzünden gereksiz sürtünme yaşayabilir. SEO’da amaç, bu iki tarafı dengelemektir.

Ne zaman performans, ne zaman indeksleme sorunu aranır​

Eğer sayfa Search Console’da görülmüyor ya da çok geç görünüyorsa önce erişim, robots ve sitemap tarafına bakılır. Sayfa indeksleniyor ama beklenen trafiği getirmiyorsa içerik uyumu, arama niyeti ve sayfa deneyimi birlikte değerlendirilir. Bu ayrım, yanlış araçla yanlış sorunu çözmeye çalışmanızı önler.

Pratikte şu yaklaşım işe yarar: önce sayfa teknik olarak açık mı, sonra Google’ın seçtiği kanonik URL doğru mu, sonra sayfa kullanıcıya yeterli değer veriyor mu. Bu üç adım sırasıyla netleşmeden performans optimizasyonuna yüklenmek çoğu zaman erken aşama bir karardır.

Teknik kontrol sırası nasıl kurulmalı​

İlk kontrol, sayfanın gerçekten erişilebilir olup olmadığıdır. İkinci kontrol, yanlışlıkla noindex, robots engeli ya da yanlış canonical uygulanıp uygulanmadığıdır. Üçüncü kontrol, sitemap ve iç bağlantıların önemli URL’leri destekleyip desteklemediğidir. Dördüncü kontrol ise sayfa deneyimi ve içerik kalitesinin arama niyetiyle uyumudur.

Bu sırayı korumanın faydası, semptomla nedeni karıştırmamanızdır. Görünürlük kaybı yaşayan birçok sitede sorun tek bir yerde değil, birkaç küçük teknik tercih üst üste geldiğinde büyür. Google optimizasyonunda kalıcı sonuç, tekil bir ayardan değil, bu katmanların birlikte temiz çalışmasından gelir.

Hızlı karar çerçevesi​

İndekslenmiyorsa önce erişim ve engel ayarlarını, taranmıyorsa sitemap ve crawl verimliliğini, sıralama zayıfsa içerik uyumu ve sayfa deneyimini kontrol edin. Aynı soruna aynı anda bütün araçlarla saldırmak yerine, katmanları sırayla ayırmak daha doğru sonuç verir.

Bu yaklaşım, özellikle büyük sitelerde gereksiz değişiklikleri azaltır. Bir sayfayı Google’a anlatmak çoğu zaman yeni bir teknik hile değil; taranabilir, indekslenebilir ve kullanıcı için anlamlı bir yapı kurmaktır.