Screaming Frog SEO Spider nedir?

Screaming Frog SEO Spider, bir web sitesini arama motoru botuna benzer şekilde tarayarak teknik SEO verilerini raporlayan masaüstü programıdır. Sayfaların HTTP durum kodlarını, başlık ve meta açıklamalarını, canonical etiketlerini, yönlendirmeleri, robots kurallarını, bağlantıları ve benzeri unsurları tek bir tarama içinde görmenizi sağlar. Google sıralaması garantilemez; amacı, arama motorlarının siteyi taramasını ve sayfaları anlamasını zorlaştırabilecek teknik sorunları bulmaktır.

Başlangıçta ücretsiz sürümle tek taramada en fazla 500 URL incelenebilir. Bu sınır ürün sayısı değildir; taramaya dahil başka URL’ler de kapasiteyi etkiler. JavaScript rendering, taramaları kaydetme ve bazı gelişmiş yapılandırmalar lisans gerektirir. İhtiyaç belirlenmeden bütün raporların ücretsiz sürümde açık olduğunu varsaymayın.

Nasıl çalışır?​

Programa bir başlangıç adresi verdiğinizde Spider, o sayfadaki iç bağlantıları izleyerek site içinde ilerler. Her URL için yanıt kodu, keşfedilen bağlantılar ve HTML içindeki SEO öğeleri kaydedilir. Sonuçları URL bazında inceleyebilir, filtrelerle yalnızca hata veren veya eksik verisi bulunan sayfaları ayırabilir ve raporları dışa aktarabilirsiniz.

Tarama, sitenin gerçek durumunu tek başına eksiksiz göstermez. Örneğin normal Spider modunda bağlantılardan keşif yapılır; XML site haritasında olup hiçbir iç bağlantı almayan bir sayfayı ayrıca site haritasından kontrol etmek gerekir. JavaScript ile sonradan üretilen içerikler için de uygun JavaScript işleme ayarlarının kullanılması gerekebilir.

Somut örnek​

Varsayımsal olarak example.com sitesinde 80 ürün sayfası olduğunu varsayalım. Tarama sonucunda bazı ürün URL'lerinin 404 verdiğini, bazı sayfaların aynı title değerini taşıdığını ve bir kategori sayfasının kendi adresi yerine başka bir URL'yi canonical olarak gösterdiğini görüyorsunuz.

Bu bulguların anlamı aynı değildir. 404 veren URL gerçekten kaldırılmışsa eski bağlantılar ve yönlendirme ihtiyacı incelenir. Aynı title değerleri, sayfaların arama sonuçlarında birbirinden ayrılmasını zorlaştırabilir. Yanlış canonical ise arama motoruna hangi URL'nin tercih edilmesi gerektiği konusunda hatalı sinyal verebilir. Önce sorunun gerçek iş kuralı olup olmadığını kontrol edin; Spider yalnızca teknik bulguyu gösterir, doğru çözümü site yapısına göre siz belirlersiniz.

Temel tarama ve değerlendirme adımları​

1. Screaming Frog SEO Spider'ı açın ve başlangıç adresi olarak https://example.com/ girin. Site size ait değilse tarama izniniz ve sunucu kapasitesi konusunda yetkiniz olduğundan emin olun.
2. Tarama başlamadan önce kapsamı belirleyin. Yalnızca belirli bir alt klasörü, URL listesini veya site haritasını incelemeniz gerekiyorsa tüm siteyi taramak yerine uygun kapsamı seçin.
3. Tarama tamamlandığında önce HTTP durumlarını inceleyin. 2xx başarılı yanıtları, 3xx yönlendirmeleri, 4xx istemci hatalarını ve 5xx sunucu hatalarını ifade eder.
4. Title, meta açıklama, H1, canonical ve indekslenebilirlik raporlarında eksik, yinelenen veya olağandışı değerleri filtreleyin. Tek bir örneği düzeltmek yerine aynı şablondan üretilen tüm URL'leri kontrol edin.
5. Sorunlu URL'leri dışa aktarın ve her bulgu için sorumlu şablonu, içerik kararını veya sunucu ayarını belirleyin. Düzeltmeleri uyguladıktan sonra ilgili URL'leri yeniden tarayarak sonucun değiştiğini doğrulayın.

Tarama sonuçlarını yorumlarken aşağıdaki ayrım pratik bir önceliklendirme sağlar:

Sık yapılan hatalar​

Her kırmızı uyarıyı otomatik olarak SEO felaketi kabul etmek doğru değildir. Bazı sayfalar bilinçli olarak noindex olabilir, bazı ürünler geçici olarak kaldırılmış olabilir veya aynı title değeri bir şablon hatasından değil özel bir içerik kararından kaynaklanabilir. Önce URL'nin amacı ve beklenen davranışı doğrulanmalıdır.

Diğer yaygın hata yalnızca ana sayfayı taramaktır. Sorunlar çoğunlukla kategori, ürün, filtre veya eski içerik URL'lerinde ortaya çıkar. Ayrıca tarama tamamlanmadan sonuçları yorumlamak, robots kurallarını ve JavaScript kaynaklı içerikleri dikkate almamak, düzeltme sonrası yeniden kontrol yapmamak da yanıltıcı sonuçlara yol açar.

Sık sorulan sorular​

Spider raporu Google’ın gerçek indeks raporu mudur?​

Hayır. Seçtiğiniz ayarlar ve taramanın yapıldığı andaki yanıtları gösterir. Google’ın hangi URL’yi indekslediğini veya hangi canonical’ı seçtiğini birebir kanıtlamaz. Araçtaki teknik gözlemi gerçek Search Console bilgisi ve sitenin iş kuralıyla birlikte değerlendirin.

Ücretsiz sınırda duran taramayı tamamlanmış sanabilir miyim?​

Hayır. Başlangıç adresinden bütün site keşfedilmiş olmak zorunda değildir. Sınırın mı, kapsam ayarının mı, robots engelinin mi taramayı durdurduğunu kontrol edin. Raporu paylaşırken incelenen kapsamı belirtin; görülmeyen URL’lerde sorun olmadığı sonucunu çıkarmayın.