SEO Spider: nedir, nasıl çalışır ve nasıl seçilir
SEO spider, bir web sitesinde bir arama motoru gibi link link dolaşan ve her URL'nin verdiği yanıtı kaydeden bir programdır. İşte bir spider'ın perde arkasında nasıl çalıştığı, rakamlarına güvenmeden önce neleri test etmeniz gerektiği ve hangilerini denemeye değer olduğu.
SEO spider nedir
Web bir ağ olduğu için, linkleri izleyerek içinde dolaşan programlara örümcek (spider) dendi. Crawler, bot ve robot da duyarsınız. Hepsi aynı temel şeyi anlatır: bir sayfayı getiren, linklerini okuyan ve o linklerin işaret ettiği sayfalara geçen yazılım.
En büyüklerini arama motorları çalıştırır. Googlebot bir spider'dır. SEO spider ise aynı fikrin kendi sitenize yöneltilmiş halidir; bir arama motorunun takılacağı şeyleri raporlamak için yapılmıştır: kırık linkler, yönlendirmeler, engellenmiş sayfalar, eksik title'lar, kopya içerik ve hiçbir şeyin link vermediği sayfalar.
Birçok kişi bu terimi masaüstü crawler'ının adı SEO Spider olan Screaming Frog'dan bilir; ifade artık tüm kategori için kullanılıyor. Kutunun üzerindeki ad ne olursa olsun, bir SEO spider sıkça karıştırıldığı iki araçtan farklıdır:
- Bir scraper, sayfalardan fiyatlar gibi belirli verileri çeker. Bir spider ise tüm siteyi ve sayfalarının nasıl bağlandığını haritalar.
- Bir backlink aracı, size verilen linkleri bulmak için diğer siteleri okur. Bir spider ise sitenizi içeriden okur.
SEO spider adım adım nasıl çalışır
Perde arkasında her SEO spider, URL'leri tükenene ya da sizin belirlediğiniz bir sınıra ulaşana kadar aynı döngüyü çalıştırır:
- Bir kuyrukla başlayın. Kuyruk başlangıç URL'sini, çoğu zaman da XML site haritalarındaki URL'leri tutar.
- Kuralları kontrol edin. Bir URL'yi getirmeden önce spider robots.txt'yi ve kendi kapsam ayarlarını kontrol eder: bu host, bu klasör, bu kalıplar. SEO ProCheck eksiksiz bir robots.txt başvuru kaynağı tutuyor.
- Getirin ve kaydedin. URL'yi ister ve yanıtı saklar: durum kodu, header'lar, yanıt süresi ve gövde.
- Sayfayı ayrıştırın. HTML'den title'ı, meta robots'u, canonical'ı, başlıkları ve her linki anchor metniyle okur.
- Linkleri temizleyin. Göreli linkler tam URL'lere dönüşür, fragment'lar atılır ve her URL daha önce görülenlerle karşılaştırılır; böylece hiçbir şey iki kez getirilmez.
- Yeni olanı kuyruğa ekleyin. Kapsamdaki yeni URL'ler kuyruğun sonuna gider. Kuyruğu sırayla işlemek, her sayfaya tarama derinliğini, yani başlangıç URL'sinden tıklama sayısını verir.
- Bekleyin, sonra tekrarlayın. Nazik bir spider isteklerini aralıklı gönderir ve sunucu zorlandığında yavaşlar.
Kuyruk boşaldığında asıl iş başlar: spider her sayfayı diğerleriyle ve arama motorlarının yayımladığı kurallarla karşılaştırır ve verileri bulgulara dönüştürür. Bazı spider'lar sayfaları önce bir tarayıcıda render eder; böylece yalnızca JavaScript çalıştıktan sonra görünen linkleri ve içeriği görür.
SEO spider her URL için neleri kaydeder
Bulgular ancak altlarındaki veriler kadar iyidir. İyi bir SEO spider her URL için şunları saklar:
| Alan | Kaydettiği |
|---|---|
| Yanıt | Durum kodu, yönlendirme hedefi, header'lar, yanıt süresi, boyut |
| İndeksleme sinyalleri | Meta robots, X-Robots-Tag, canonical, robots.txt'nin izin verip vermediği |
| İçerik | Title, meta description, başlıklar, kelime sayısı |
| Linkler | Gelen ve giden linkler, anchor metni, her linkin sayfada nerede durduğu |
| Yapı | Tarama derinliği, klasör, sayfanın kullandığı şablon |
| Keşif | URL'nin nasıl bulunduğu: bir link, bir XML site haritası, bir yönlendirme |
Kontroller bundan doğar. Nasıl göründüklerine dair birkaç örnek: İç URL 4xx, 5xx döndürüyor ya da yanıt vermiyor, İç URL bir yönlendirme zincirinde, Yetim URL 200 döndürüyor ve indekslenebilir ve 4xx döndüren URL bir XML site haritasında listeleniyor. Teknik SEO crawler rehberi bir denetimin kapsaması gereken alanların tam listesini anlatır.
SEO spider indirme mi, online SEO spider mı
İnsanlar ikisini de arar ve bunlar iki farklı kurulumdur.
| Masaüstü spider | Online spider | |
|---|---|---|
| Platformlar | ||
| Verilerin tutulduğu yer | Diskiniz | Üreticinin sunucuları |
| Tarama boyutunu belirleyen | Sizin bilgisayarınız | Planınız |
| VPN arkasındaki staging | ✓ | ◐ IP izin listesiyle |
| Dizüstü kapalıyken tarar | – | ✓ |
| Bir taramayı paylaşmak | Bir dosya ya da eşitleme | Bir bağlantı |
Genel olarak hiçbiri daha iyi değildir. Çok sayıda site denetleyen danışmanlar çoğu zaman masaüstü uygulamasını sever; birkaç büyük siteyi gece gündüz izleyen ekipler çoğu zaman bulutu sever. Bazı araçlar ikisini de sunar.
Bir SEO spider'a güvenmeden önce neleri test etmeli
Bir spider'ın gerçek bir sitede nasıl davrandığı, özellik listesinden daha önemlidir. İyi tanıdığınız bir siteyi tarayın ve şunlara bakın:
- URL sayısı mantıklı mı? XML site haritalarınızla karşılaştırın. Çok daha büyük bir sayı genellikle parametreler, filtreler ya da bir tarama tuzağı demektir ve araç hangisi olduğunu görmenize yardım etmelidir.
- Ne kadar nazik? Saniyede URL cinsinden bir hız ayarına ve sunucu 429 ya da 503 döndürdüğünde otomatik yavaşlamaya bakın.
- robots.txt'ye nasıl davranıyor? Varsayılan olarak ona uymalı ve staging gibi size ait bir sitede onu yok saymanıza izin vermelidir.
- Bir listeyi tarayabiliyor mu? Bir taşımadan sonra bir URL kümesini kontrol etmek için liste modu çok zaman kazandırır.
- JavaScript render ediyor ve farkı gösteriyor mu? Ham ve render edilmiş HTML'i yan yana görmek, render'ın site için önemli olup olmadığını söyler.
- Durup devam edebiliyor mu? Büyük taramalar kesintiye uğrar. Kaldığı yerden devam etmek baştan başlamaktan iyidir.
- Bir bulgu üzerinde harekete geçebiliyor musunuz? Bir işareti açın ve neden önemli olduğunu ve nasıl düzeltileceğini söyleyip söylemediğine bakın.
İşte kendi sitemizde URL sayısı testi. Neova, seoprocheck.com'u 17 Ekim 2026'da taradı:
| seoprocheck.com, tam tarama | Sayı |
|---|---|
| Alınan URL'ler | 10.222 |
| Süre | 61 dakika |
| 200 döndüren HTML sayfaları | 4.561 |
| XML site haritalarındaki URL'ler | 1.835 |
| Linklerle ulaşılan, site haritasında olmayan | 2.727 |
| Bir site haritasında, hiçbir linkle ulaşılmıyor | 1 |
| Tamlık | 99.98% |
| Sayfa gövdeleri, ham | 1,66 GB |
| Diskte sıkıştırılmış olarak saklanan | 340 MB |
Tarama, site haritalarının listelediğinden çok daha fazla URL buldu. Farkın çoğu, taranması sorun olmayan ama site haritasında bulunmayan sayfalardır; İndekslenebilir URL hiçbir XML site haritasında yok kontrolü tam olarak bunu raporlar. Hiçbir linkin ulaşmadığı tek listelenmiş URL ise XML site haritasındaki yetim bir URL'dir. Büyük bir sitede tarama bütçesi bu tür boşluklarda önem kazanmaya başlar.
Bilmeye değer SEO spider araçları
Her tür iş için iyi seçenekler var. Her şirketin kendi sayfalarına göre (11 ve 21 Kasım 2026'da okundu) her birinin bilinen yanı:
| Araç | Platformlar | Denemek için | Bilinen yanı |
|---|---|---|---|
| Screaming Frog SEO Spider | 500 URL ücretsiz | Yapılandırma, veri çıkarma, komut satırı | |
| Sitebulb | 14 günlük deneme | 300+ önceliklendirilmiş Hints | |
| Lumar | Bir teklif | Büyük ve küçük taramalar aynı anda | |
| JetOctopus | 7 günlük deneme | Sınırsız tarama ve kullanıcı | |
| Semrush Site Audit | Paketle birlikte | Bir SEO paketinin parçası | |
| Ahrefs Site Audit | Paketle birlikte | Bir SEO paketinin parçası | |
| Neova | 1.000 URL ücretsiz | Her biri kaynaklı 694 kontrol |
Kategoriye adını Screaming Frog'un masaüstü crawler'ı verdi ve ücretsiz sürümü kayıt gerektirmez. Karşılaştırma sayfası bunları her işaret için bir kaynakla özellik özellik yan yana koyar. Zaten Screaming Frog kullanıyor ve başka bir crawler'ın onun yanında nasıl durduğunu görmek istiyorsanız Screaming Frog alternatifi rehberi bunu anlatır, ücretsiz SEO crawler rehberi de ücretsiz planları karşılaştırır.
Neova'nın Spider taraması
Neova, Neova LLC tarafından geliştirilen, Mac (Apple silicon), Windows ve Linux için masaüstü bir SEO crawler'dır; tarayıcıda da Neova Online olarak çalışır. Link izleyen modunun adı tam anlamıyla Spider'dır: Yeni tarama, Tarama modu, Spider. Başlangıç URL'sinden iç linkleri, ardından XML site haritalarını izler ve getirdikleri üzerinde her biri kaynaklı 694 kontrol çalıştırır.
- Başlangıç URL'si kontrolü: taramadan önce ana sayfanın 200 döndüren sürümünü seçer ve diğer sürümlerin ne yaptığını söyler.
- Varsayılan olarak nazik: saniyede 3 URL; sunucu yavaşladığında ya da 429 veya 503 döndürdüğünde hızını yarıya indirir ve Retry-After'a uyar. Size ait olduğunu onayladığınız bir sitede saniyede 50'ye kadar.
- Her URL açıklanır: URL dökümü her URL'yi tek bir gruba koyar (temiz sayfalar, parametre varyantları, hatalı URL'ler, tarama tuzakları, görseller vb.), Keşif de tarama sürerken bir tuzağı hariç tutmayı önerir.
- Liste modu da var: Liste taraması yalnızca yapıştırdığınız ya da yüklediğiniz URL'leri getirir.
- Büyük taramalar diskte: tarama bellekte değil diskte durur, Devam et de durdurulmuş bir taramayı ayarları geri yüklenmiş olarak sürdürür.
- Gerektiğinde render: Chrome'da JavaScript render, ham HTML ile karşılaştırmalı.
- Eski taramalarınız da gelir: Tarama içe aktar, bir Screaming Frog Internal dışa aktarımını ya da bir Sitebulb URL dışa aktarımını açar ve üzerinde kontrolleri çalıştırır.

Free plan her kontrolle tarama başına 1.000 URL'ye kadar tarar, Desktop ise kart gerekmeden 14 gün ücretsiz denenebilir. Özelliklere ve fiyatlandırmaya bakın.
İlk Spider taramanız
- Bilgisayarınız için Neova'yı indirin ve açın.
- Tara'yı, ardından Yeni tarama'yı seçin, sitenin adresini yazın ve Taramayı başlat'a tıklayın.
- İlk dakikaları izleyin. Keşif, URL'leri çoğaltan bir takvim ya da filtre gösterirse onu hariç tutun ve taramanın devam etmesine izin verin.
- Kontroller bittiğinde Genel bakış'tan, ardından Tüm işaretler'den başlayın, önce Düzeltilmeli. Sık karşılaşılan ilk bulgular: kopya title'lar ve 155 karakteri aşan meta description'lar. Kendi seoprocheck.com taramamızda bunlardan 56 ve 582 vardı.
İlk taramanız yardım sayfası her ekranı gösterir, bir web sitesi nasıl taranır rehberi de kapsamı ve hariç tutmaları daha ayrıntılı anlatır.
Sorular
SEO spider nedir?
Bir web sitesini bir arama motoru gibi tarayan program: bir sayfayı getirir, linklerini izler ve her URL'nin verdiği yanıtı kaydeder. Bir SEO spider ardından bu verileri tarama ve indekslemenin önüne geçen sorunlar açısından kontrol eder.
Ücretsiz bir SEO spider var mı?
Evet. Screaming Frog'un SEO Spider'ının tarama başına 500 URL'ye kadar ücretsiz bir sürümü var, Neova'nın da 694 kontrolün tümüyle tarama başına 1.000 URL'ye kadar Free planı var. Ücretsiz SEO crawler rehberi seçenekleri karşılaştırır.
Online bir SEO spider var mı?
Evet. Lumar ve JetOctopus gibi bulut crawler'ları, Sitebulb Cloud ve Semrush ile Ahrefs'teki site denetimleri tarayıcıda çalışır. Neova bilgisayarınızda ve tarayıcıda Neova Online olarak, aynı hesapla çalışır.
Bir SEO spider sitemi yavaşlatır mı?
Nazik bir hızda hayır. Saniyede birkaç URL çoğu sunucu için hafif bir iştir ve iyi spider'lar sunucu 429 ya da 503 döndürdüğünde kendiliğinden yavaşlar. Daha hızlı taramayı yalnızca size ait bir sitede ya da site sahibinin onayıyla yapın.
Mac için bir SEO spider indirebilir miyim?
Evet. Neova, Apple silicon'lu Mac'lerde yerel olarak, ayrıca Windows ve Linux'ta çalışır. Neova'yı indirin ve Free planla başlayın.