Teknik SEO denetimlerinin omurgasını oluşturan Screaming Frog SEO Spider, milyonlarca sayfadan oluşan web sitelerini bir arama motoru botu gibi tarayarak kaynak kod ve DOM düzeyindeki tüm altyapı açıklarını listeler.
Yazılımın varsayılan tarama ayarlarının ötesine geçerek; JavaScript tabanlı istemci render süreçlerini simüle etmek, özel veri kazıma (Custom Extraction) kuralları işletmek ve Google Search Console / GA4 API entegrasyonlarıyla tarama bütçesi açıklarını tespit etmek profesyonel bir metodoloji gerektirir.
1. Screaming Frog İleri Seviye Konfigürasyon Ayarları
Büyük ölçekli projelerde doğru sonuçlar almak için tarama motorunun yapılandırılması gerekir:
1. Tarama Modu: Text-Only vs JavaScript Rendering
- Spider Modu: Statik HTML çıktısını milisaniyeler içinde tarar; binlerce sayfalık hızlı denetimler için uygundur.
- JavaScript Rendering (Chrome WRS): React, Vue veya Angular gibi istemci tarafında render edilen tek sayfa uygulamalarında (SPA) DOM ağacının tam olarak yüklenmesini bekler. AJAX ile yüklenen meta etiketleri ve linkleri yakalar.
2. Tarama Sınırları ve Sunucu Koruma (Speed & Resource Limits)
Sunucuyu 503 Service Unavailable hatasına sokmamak için:
- Max Threads: 5 - 10 aralığında tutulmalıdır.
- Limit Max Storage: Bellek şişmesini önlemek için
Database Storagemodu aktif edilmelidir.
2. Özel Veri Kazıma: Custom Extraction (XPath, CSS, Regex)
Screaming Frog, yalnızca standart meta etiketlerini değil; sayfa şablonlarındaki her türlü özel veriyi çekmenizi sağlar:
| Senaryo | Yöntem | İfade / Sorgu Örneği |
|---|---|---|
| Stok Durumu Çekme | XPath | //span[@class='stock-status']/text() |
| Yazar İsmi Doğrulama | CSS Path | div.author-meta > a.author-name |
| JSON-LD Schema Tipi | Regex | "@type":\s*"([^"]+)" |
| Fiyat Bilgisi Analizi | XPath | //meta[@property='product:price:amount']/@content |
Bu yöntemle tüm e-ticaret kataloğundaki stoksuz ürünlerin, hatalı fiyatlandırılan sayfaların veya schema tipi eksik blogların listesi tek bir CSV çıktısıyla elde edilir.
3. API Entegrasyonları ile Çok Katmanlı SEO Analizi
Screaming Frog’u harici veri kaynaklarıyla bağlayarak zenginleştirilmiş analiz tabloları oluşturulabilir:
[Screaming Frog Spider]
├── (GSC API) ──> Tıklama, Gösterim ve CTR Verileri
├── (GA4 API) ──> Oturum, Hemen Çıkma ve Gelir Verileri
├── (PageSpeed Insights) ──> LCP, CLS, INP Web Vitals Skorları
└── (Ahrefs API) ──> Sayfa Bazlı Referring Domain Sayısı
Yetim Sayfa (Orphan Page) Tespiti
GSC ve XML site haritası entegrasyonu sayesinde; site içi menülerden veya linklerden hiçbir bağlantı almayan ancak dizinde olan veya trafik çeken yetim sayfalar (Orphan Pages) otomatik olarak listelenir.
4. Denetim Sırasında En Sık Kontrol Edilen 5 Sekme
- Response Codes: 404 Kırık linkler, 301 yönlendirme zincirleri (Redirect Chains) ve 5xx sunucu yanıtları.
- Canonicals: Hatalı
canonicaletiketleri,canonicalizedsayfaların durumu ve kendini işaret etmeyen URL’ler. - Directives: Yanlışlıkla
noindexveyanofollowbasılmış kritik ürün ve hizmet sayfaları. - Hreflang: Çok dilli sitelerde eksik
return tagve dil kodu uyumsuzlukları. - Inlinks & Crawl Depth: Sayfaların ana sayfadan itibaren kaçıncı tıklama derinliğinde (Crawl Depth) yer aldığı. 4. seviyeden derin sayfalar link mimarisiyle yukarı taşınmalıdır.
Sıkça Sorulan Sorular
Screaming Frog ücretsiz sürümünün limitleri nelerdir?
Ücretsiz sürüm maksimum 500 URL taramaya izin verir ve API entegrasyonları ile JavaScript render özelliklerini kısıtlar. Kurumsal projeler için ücretli lisans zorunludur.
Tarama bütçesi optimizasyonunda Screaming Frog nasıl kullanılır?
Bot tarafından taranan ancak noindex alan, parametre içeren veya 301 ile yönlenen gereksiz URL’ler robots.txt ile engellenerek Googlebot’un yalnızca değerli sayfalara odaklanması sağlanır.
Stratejik Sonuç
Screaming Frog, web sitenizin kod mimarisini arama motorlarının gözünden görmenizi sağlayan vazgeçilmez bir teknik denetim aracıdır. Sitenizin derinlemesine altyapı analizini gerçekleştirmek için teknik SEO danışmanlığı süreçlerimizi inceleyin.
İlgili Yazılar
- Semrush Kullanım Rehberi: Anahtar Kelime ve Rakip Denetimi
- Ahrefs Kullanımı: İleri Düzey SEO ve Rakip Analizi Rehberi
- Screaming Frog’da OpenAI API ile Otomatik SEO Denetimi ve Başlık Üretimi
- Canonical Etiketi Kullanımı: Yinelenen İçerik ve URL Yönetimi
- Hreflang Etiketi Kullanımı: Çok Dilli SEO ve Hata Rehberi
Daha kapsamlı destek için: SEO Danışmanlığı hizmetimize göz atın.