NeovaGelişmiş SEO Platformu

SEO için log analizi: Googlebot'un gerçekte ne yaptığı nasıl okunur

Bir crawler, bir arama motorunun neyi getirebileceğini söyler. Sunucu loglarınız ise neyi gerçekten getirdiğini söyler. SEO için log analizi, Googlebot'un, Bingbot'un ve yapay zeka crawler'larının zamanlarını nerede harcadığını ve nereye hiç gitmediğini görmek için bu logları okuma alışkanlığıdır.

Denetimler, loglar ve izlemeseo için log analiziGüncelleme: 21 Kasım 2026Neova ekibi

Log analizi nedir?

Her web sunucusu yanıt verdiği her istek için bir satır yazar: kim istedi, hangi URL için, ne zaman ve sunucu ne yanıt verdi. Bu satırlar bir erişim loguna gider. Log analizi, bu logu genellikle arama motoru ve yapay zeka crawler'larına göre filtreleyerek okumak ve yanıtlara dönüştürmektir.

SEO için sorular basittir. Googlebot hangi sayfaları ve ne sıklıkla ziyaret ediyor? Hangilerini hiç ziyaret etmiyor? Nerede yönlendirmelere ve hatalara çarpıyor? Var olmaması gereken URL'lere istek harcıyor mu?

Başka hiçbir kaynak bunları aynı ayrıntıyla yanıtlamaz. Search Console'un Tarama İstatistikleri raporu bir özet verir. Bir tarama linklerinizin neyi açığa çıkardığını gösterir. Her gerçek isteği yalnızca log gösterir.

KaynakHer istekHer botURL başına
Sunucu logu✓✓✓
Tarama İstatistikleri–◐◐
Kendi taramanız––✓

Tarama İstatistikleri yalnızca Googlebot'u, 90 gün boyunca, örnek URL'lerle kapsar. Yöntemin daha uzun bir anlatımı için SEO ProCheck'teki SEO için log analizi yazısına bakın.

Log analizi SEO için neden önemlidir

  • Googlebot'un görmezden geldiği sayfaları bulun. Link alan, indekslenebilir ve sitemap'te olan ama hiç istenmeyen bir sayfa, Google'ın gitmeye değer bulmadığı bir sayfadır.
  • Tarama bütçesi israfını yakalayın. Parametreler, filtreli URL'ler ve eski yönlendirmeler siz onları unuttuktan çok sonra bile loglarda görünür.
  • Hataları Googlebot'un gördüğü gibi fark edin. Yalnızca yük altında oluşan bir 5xx ya da bir güvenlik duvarından gelen 429, kendi taramanızda hiç görünmeyebilir.
  • Yetim sayfaları bulun. Botların istediği ama hiçbir iç linkin ulaşmadığı URL'ler çoğu zaman hâlâ ilgi gören eski sayfalardır.
  • Yapay zeka crawler'larını görün. GPTBot, ClaudeBot, PerplexityBot ve diğerleri de satır bırakır; böylece ne aldıklarını ve neyin reddedildiğini görebilirsiniz.
  • Bir taşımayı kontrol edin. Bir taşımadan sonra log, Googlebot'un yönlendirmelerinizi izleyip izlemediğini ve yeni URL'lere ulaşıp ulaşmadığını gösterir.

Bir sunucu log satırı neler içerir

En yaygın format Apache combined log formatıdır; bu aynı zamanda Nginx'in varsayılanıdır. Bir satır şöyle görünür:

66.249.66.1 - - [10/Nov/2026:13:55:36 -0600] "GET /shoes/ HTTP/1.1" 200 2326 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
SahaÖrnekNeden önemli
İstemci IP'si66.249.66.1Botun gerçek olduğunu doğrulamanın tek yolu
Süre10/Nov/2026:13:55:36Tarama sıklığı ve yeniden tarama aralıkları
İstekGET /shoes/Hangi URL getirildi
Durum200Başarı, yönlendirme ya da hata
Bayt2326Yanıt boyutu
User agentGooglebot/2.1Hangi crawler'ın istediğini iddia ettiği

IIS, sütunları adlandıran bir #Fields: satırıyla W3C genişletilmiş formatını yazar. Cloudflare, CloudFront, AWS yük dengeleyicileri, Google Cloud, Akamai ve Fastly gibi CDN'lerin ve yük dengeleyicilerin kendi düzenleri vardır, çoğu zaman JSON. Apache'nin düz common formatında user agent yoktur, bu yüzden içinde hiçbir bot ayırt edilemez. Combined formatı isteyin.

Sunucu loglarınızı nasıl alırsınız

HostLog nerede
cPanelMetrics, Raw Access (.gz)
PleskLogs, Manage Log Files
AmazonLoglama açıldıktan sonra S3 bucket
Google CloudEtkinleştirildikten sonra Cloud Logging
CloudflareLogpush ya da kendi hesabınız
Diğer herkesBT ekibine ya da hosting firmanıza sorun

Amazon ve Google Cloud'da erişim loglaması siz açana kadar kapalıdır. Bir log isterken talebi küçük ve onaylaması kolay tutun:

İsteyinDeğer
Gün30 ya da daha fazla
SatırlarYalnızca crawler'lar
AlanlarZaman, URL, durum, user agent, IP
FormatCommon değil, combined

Sıradan ziyaretçileri dışarıda bırakmak talebi kişisel verilerden arındırır; güvenlik ekipleri bunu takdir eder. 30 günden kısa bir sürede yavaş taranan sayfalar hiç ziyaret edilmemiş gibi görünür.

Bir satıra güvenmeden önce Googlebot'u doğrulayın

Herkes bir user agent dizesine Googlebot yazabilir. Scraper'lar bunu sürekli yapar. Bir isteği saymadan önce adını verdiği şirketten geldiğini kontrol edin:

BotReverse DNS'in bittiği yerYayımlanmış IP listesi
Googlebotgooglebot.com, google.com, googleusercontent.com✓
Bingbotsearch.msn.com✓
GPTBot, OAI-SearchBot, ChatGPT-UserIP listesini kullanın✓
PerplexityBot, Perplexity-UserIP listesini kullanın✓

DNS için IP üzerinde reverse lookup çalıştırın, adı kontrol edin, ardından aynı IP'ye geri işaret ettiğini doğrulamak için forward lookup yapın. Bir botun adını taşıyan ama kontrolü geçemeyen bir istek o bot değildir. Onu ayrı sayın. Kendini yapay zeka crawler'ı olarak tanıtan doğrulanmamış istekler 200 yanıtı alıyorsa, birisi içeriğinizi ödünç bir adla topluyordur; Neova bunu Doğrulanmamış yapay zeka botu isteklerine 2xx yanıt verildi olarak, hiçbir istek doğrulanmadığında ise Yapay zeka botu adı yalnızca doğrulanmamış isteklerde geçiyor olarak işaretler.

Nelere bakılmalı: bir log analizi kontrol listesi

Logu bir taramayla karşılaştırarak okuyun. 17 Ekim 2026'daki tam seoprocheck.com taramamız 200 ile yanıt veren 4.561 HTML sayfası buldu: o sitenin bir logunun sayfa sayfa karşılaştırıldığı liste budur. Okumaya değer sinyaller, varsa Neova'nın log kontrollerinin kullandığı eşiklerle birlikte:

SinyalSağlıklıNe zaman endişelenmeli
Bot başına 3xx, 4xx, 5xx payıDüşük ve sabit%1'in üstünde ve iki katına çıkmış
Botlara 429 ve 4030Sınırsız
Hiç ziyaret edilmeyen önemli sayfalar0Sınırsız
Googlebot yeniden tarama aralığıSabit%50 ya da daha fazla artış
Günde hiç görülmemiş URL'lerSabitGünde 10+, iki katına çıkmış
Getirilen CSS ve JS200 döndürüyorHerhangi bir hata

Ayrıca bot başına günlük doğrulanmış istekleri sayın ve botların isteyip taramanızın bulmadığı URL'lere bakın: yetim sayfalar, eski sayfalar, parametreler ya da diğer sitelerden gelen linkler. Hiç görülmemiş URL'lerde ani bir artış çoğu zaman bir tarama tuzağının ya da bozuk bir şablonun yayına girdiği anlamına gelir.

Neova'da log analizi

Neova masaüstü uygulamasında logu taramayla birleştiren bir Sunucu logu aracı vardır; böylece her URL hem taramanın ne bulduğunu hem de botların ne yaptığını gösterir.

  • Satırların kendisinden tanınan 8 log kaynağı: Apache ve Nginx combined, IIS W3C, Amazon CloudFront, Amazon yük dengeleyicileri, Cloudflare Logpush, Google Cloud yük dengeleme, Akamai DataStream ve olağan alan adlarını kullanan Fastly ya da diğer JSON ve CSV logları. Düz, .gz ya da tek bir .zip içinde birkaç dosya.
  • Yalnızca doğrulanmış botlar. Bir istek, adresi şirketinin yayımladığı listede olduğunda Googlebot, Bingbot ya da bir yapay zeka crawler'ı için sayılır. Google ve Microsoft için reverse DNS de açılabilir.
  • Hiç ziyaret edilmeyenler ve yetimler: log aralığında Googlebot'un hiç ziyaret etmediği HTML sayfaları ve botların isteyip taramanın bilmediği URL'ler.
  • Retler: her botun aldığı 429 ve 403 yanıtları.
  • Cloudflare: Cloudflare arkasındaki bir site için Neova crawler isteklerini kendi Cloudflare hesabınızda toplayabilir, sunucu erişimi gerekmez.
  • Logu iste, BT ekibine gönderilecek talebi yazar: yalnızca crawler satırları, kurulacak hiçbir şey yok.
  • Bilgisayarınızda okunur. Dosya oradan hiç çıkmaz ve hiçbir yere IP adresi yazılmaz.

Log kontrolleri arasında arama botlarının 3xx, 4xx ya da 5xx yanıt payının artması, Googlebot yeniden tarama aralığının %50 ya da daha fazla uzaması, hiç görülmemiş URL'lere yönelik bot isteklerinin ikiye katlanması ve log üzerinden bulunan indekslenebilir yetim sayfalar vardır. Adım adım anlatım Bağlanmak yerine içe aktar sayfasındadır; Fiyatlar hangi planların sunucu loglarını içerdiğini gösterir.

Yaygın hatalar

  • User agent'a güvenmek. IP doğrulaması olmadan sahte Googlebot'lar her sayıyı şişirir.
  • Bir haftalık log kullanmak. Birçok sayfa bundan daha seyrek taranır. En az 30 gün kullanın.
  • İstekler yerine hit sayılarını analiz etmek. Loglarınızın bir özeti iyi bir genel bakıştır, ama ayrıntı ham satırlardadır. Onları isteyin.
  • CDN'i unutmak. Bir CDN önbellekten yanıt veriyorsa kaynak sunucunuzun logu bu istekleri kaçırır. CDN'in loglarını kullanın.
  • Logları tarama olmadan okumak. Tek başına bir log, botların hangi sayfaları atladığını söyleyemez. Karşılaştırmak için var olan sayfaların listesine ihtiyacınız vardır.

SEO ProCheck'teki log dosyası analizi SSS sayfası, sonra gelen soruları yanıtlar.

Sorular

SEO'da log analizi nedir?

Arama motoru ve yapay zeka crawler'larının hangi URL'leri, ne sıklıkla istediğini ve sunucunuzun ne yanıt verdiğini görmek için sunucunuzun erişim loglarını okumaktır. Bir crawler'ın neye ulaşabileceğini değil, gerçek tarama davranışını gösterir.

Kaç günlük log gerekir?

En az 30 gün. Daha kısa aralıklar, Googlebot'un birkaç haftada bir ziyaret ettiği sayfaları hiç taranmamış gibi gösterir.

Sunucu erişimi olmadan log analizi yapabilir miyim?

Çoğu zaman evet. Site Cloudflare ya da CloudFront gibi bir CDN'in arkasındaysa, onun logları crawler isteklerini içerir. Neova crawler isteklerini sunucu erişimi olmadan kendi Cloudflare hesabınızda toplayabilir.

Search Console'un Tarama İstatistikleri sunucu loglarının yerini tutar mı?

Hayır. Tarama İstatistikleri Googlebot toplamlarını ve örnekleri verir. Loglar her isteği, her bot için, URL başına verir; böylece onları taramanızla eşleştirebilirsiniz.

Sunucu logları kişisel veri içerir mi?

Ziyaretçi IP adreslerini içerirler, bu yüzden onlara dikkatle yaklaşın. Yalnızca crawler satırlarını isteyin. Neova logları bilgisayarınızda okur ve hiçbir yere IP adresi yazmaz.

Yanınıza alın

Asistan linkleri, bu sayfayla ilgili önceden yazılmış bir soruyla açılır.

Sitenizi Neova ile tarayınFree plan, Mac, Windows ve Linux'ta her kontrolü çalıştırır. Kredi kartı gerekmez.

Okumaya devam edin