Google bir sayfayı nasıl bulur, tarar ve dizine alır

Google bir sayfanın görünür olup olmayacağına önce erişim, sonra tarama, sonra da dizine alma açısından bakar. Sayfa engellenmişse, hata dönüyorsa ya da indekslenebilir içerik taşımıyorsa görünmez; canonical sinyali ise görünen sürümün hangisi olacağını etkileyebilir.

Bu yazı, bu zinciri tek tek ayırır: Google sayfayı nasıl keşfeder, hangi teknik sinyallerle tarar, hangi durumda dizine alır ve Search Console’da hangi raporla neyi kontrol edersiniz. Amaç, aynı sorunun farklı belirtilerini birbirine karıştırmadan okumaktır.

Google’ın bir sayfayı bulma ve tarama mantığı​

Googlebot’un bir URL’ye ulaşabilmesi için sayfanın herkese açık olması gerekir. Robots.txt ile engellenen ya da giriş isteyen sayfalar taranmaz; bu yüzden ilk soru, sayfanın gerçekten keşfedilebilir olup olmadığıdır. Sitemap ve bağlantılar, Google’ın yeni veya güncellenmiş URL’leri bulmasına yardımcı olur; fakat sitemap tek başına dizine alma garantisi vermez.

Keşif ile tarama aynı şey değildir​

Google bir sayfayı linklerden, sitemaptan veya daha önce bildiği adreslerden bulabilir. Ama bulmuş olması, mutlaka o URL’yi hemen tarayacağı anlamına gelmez. Özellikle büyük sitelerde crawl budget, öncelik ve tekrar eden URL kümeleri hangi sayfanın ne sıklıkla ziyaret edileceğini etkiler.

robots.txt, durum kodu ve erişim sinyali​

robots.txt bir isteği tamamen kesebilir; buna karşılık sayfanın 200 dönmesi, Google’ın sayfayı başarılı yanıt olarak görmesi için temel koşuldur. Hata sayfaları, ya da içerik yerine hata veren URL’ler, dizine alınması beklenen sayfalar arasında sayılmaz. Bu aşamada amaç, URL’nin teknik olarak okunabilir olup olmadığını anlamaktır.

Google neden bir sayfayı dizine almayabilir​

Tarama yapılmış olsa bile dizine alma ayrı bir karardır. Google, desteklenen biçimde metin içeriği görmezse, sayfa spam politikalarını ihlal ediyorsa ya da içerik çok zayıfsa dizine eklemeyebilir. Bu yüzden “tarandı ama görünmüyor” ifadesi her zaman aynı nedeni anlatmaz; kimi zaman sorun erişimde, kimi zaman içerik uygunluğundadır.

İndekslenebilir içerik ne demektir​

Google’ın teknik gereksinimleri, sayfanın desteklenen dosya türünde anlamlı içerik sunmasını bekler. Sadece boş şablon, gizlenmiş metin ya da kullanıcıya anlam taşımayan bir sayfa, taranmış olsa bile indekslenebilir kabul edilmeyebilir. İçeriğin okunabilirliği ve sayfa amacının netliği burada belirleyicidir.

Manuel engel ile teknik engeli ayırmak​

Noindex, robots.txt, hata kodu ve kalite kaynaklı indekslenmeme aynı sonuçla görünse de farklı düzeltme ister. Noindex, Google’a dizine alma talebini açıkça kapatır; robots.txt ise çoğu durumda taramayı engeller. Bu ayrım, yanlış müdahaleyi önler.

Search Console’da hangi rapor neyi söyler​

Tek bir URL için en doğrudan araç URL Inspection’dır. Bu araç, Google’ın sayfayı nasıl gördüğünü, canlı testi ve dizin durumunu gösterir. Daha geniş resimde Page Indexing raporu dizin sorunlarını, Crawl Stats ise Google’ın gerçekten hangi URL’lere istek yaptığını anlatır.

URL Inspection ne zaman kullanılır​

Bir sayfanın dizine girip girmediğini, son tarama zamanını ve Google’ın sayfadan ne anladığını görmek istediğinizde ilk durak burasıdır. Canlı test özellikle değişiklik sonrası faydalıdır; çünkü mevcut sürüm ile dizindeki sürüm aynı olmayabilir.

Page Indexing ve Crawl Stats birlikte okunur​

Page Indexing raporu, dizine giremeyen sayfaların nedenini; Crawl Stats ise Googlebot’un hangi URL’leri ne ölçüde ziyaret ettiğini gösterir. Bir sayfa dizine girmiyor ama Crawl Stats’ta hiç görünmüyorsa sorun taramadan önce olabilir. Ziyaret var ama indeks yoksa sorun içerik, canonical ya da kalite tarafına kayabilir.

Canonical sinyali neden sonuçları değiştirir​

Google bazen sizin belirttiğiniz canonical yerine başka bir URL’yi tercih edebilir. Bu tercih, teknik sinyallerin tutarlılığına, içerik benzerliğine ve bazı durumlarda sayfa kalitesine bağlıdır. Aynı içeriğin farklı URL sürümleri varsa, yanlış görünen sonuç aslında tarama hatası değil canonical seçimi olabilir.

Sitemap canonical tercihi anlatır ama zorlamaz​

Sitemap, Google’a hangi URL’leri önemli gördüğünüzü söyler; fakat canonical etiket, yönlendirme ve iç bağlantı yapısıyla çelişiyorsa Google farklı bir sürüm seçebilir. Bu yüzden sitemap’i tek başına çözüm gibi değil, sinyal setinin bir parçası gibi okumak gerekir.

Tek sayfalık sorunlarda izlenecek mantık​

Önce erişim kontrol edilir, sonra tarama sinyalleri, sonra dizinlenebilir içerik ve en son canonical tercihleri. Aynı URL için bu sıra bozulursa teşhis de karışır. En sağlıklı okuma, “Google sayfayı gördü mü?”, “tarayabildi mi?”, “dizine alması için yeterli gördü mü?” sorularını ayrı ayrı yanıtlamaktır.