SEO Log File Analyzer

Bir tarayıcı size sitenizde ne olduğunu söyler. Sunucu günlükleriniz ise Google'ın onunla gerçekte ne yaptığını. SEO Log File Analyzer erişim günlüklerinizi okur. Hangi botların geldiğini, ne sıklıkla ve hangi adreslere uğradıklarını gösterir. Tarama bütçesinin ne kadarının hatalarda kaybolduğunu da gösterir. Günlüklerinizi şimdi inceleyin: bir dosya yükleyin ya da birkaç bin satır yapıştırın, hiçbir şey saklanmaz.

Bu, SEO'da tahmin edilemeyen tek veri kümesidir. Sıralamalar, gösterimler ve tarama istatistikleri size hep ikinci elden ulaşır. Erişim günlükleri ise sunucunuzun gerçekten yanıtladığı her isteğin ham kaydıdır. Onları kendi makineniz yazar.

Günlükler ne gösterir

Yükledikten sonra araç gerçek tarayıcı trafiğini geri kalanından ayırır. Ardından onu üzerinde çalışabileceğiniz sayılara böler.

• Hangi tarayıcılar geldi. Bilinen her bot, isabet sayısı, benzersiz adresleri ve aldığı durum kodlarının dağılımıyla birlikte.
• Ne sıklıkla geldiler. Güne göre tarama sıklığı, böylece bir düşüş ya da sıçrama tahmin edilmek yerine görülür.
• Zamanlarını neye harcadılar. En çok taranan adresleriniz, ki bu nadiren beklediğiniz liste olur.
• Taramanın nerede kaybolduğu. Yönlendirmeler, 404 hataları, hız sınırlamaları ve sunucu hataları, her biri isteklerin payı olarak, ilgili adreslerle birlikte.

Yapay zekâ tarayıcılarının kendi görünümü var

GPTBot, ClaudeBot ve PerplexityBot artık otomatik trafiğin gerçek bir bölümünü oluşturuyor. Üstelik Googlebot'tan tamamen farklı davranıyorlar. Ayrı olarak listelenirler. Isabet sayısı ve son görülme tarihiyle.

Yapay zekâ tarayıcılarının etkinliği, bilinen bu tarayıcıların içeriğinizi bulup indirip indirmediğini gösterir. İşletmeci bunu bazen belgeler. O durumda her tarayıcı eğitim, arama ya da kullanıcı isteğiyle indiren tarayıcı olarak işaretlenir. Bir ziyaret, yapay zekâ yanıtlarında yer almayı da alıntılanmayı da garanti etmez.

Tarama verimliliği ve taramanın nereye gittiği

Tarama verimliliği ancak kanıtla konuşulmaya değer ve günlükler o kanıttır. Her yanıt anlamına göre sınıflandırılır. Başarılı, değişmedi (304 israf değildir), yönlendirmeler, 404 ve 410, hız sınırlaması, sunucu hataları. Her sınıf, botun isteklerinin bir payıdır, adresleriyle birlikte.

Büyük bir sitede sürpriz genellikle tam burada saklıdır. Adreslerdeki parametreler, liste ve arşiv kalıpları ile eski yönlendirmeler taramanın büyük bir bölümünü yutabilir. Araç bunları kalıba göre gruplar ve payı, istek sayısını ve benzersiz adres sayısını gösterir. Bunları olası verimsizlikler olarak işaretler, doğrulanmış sorunlar olarak değil. Karar sizde kalır.

Günlükleri bir taramayla karşılaştırma

DiagnoSEO Website Audit'i de kullanıyorsanız, taranmış bir proje seçin. Analiz aracı o zaman iki veri kümesini yan yana koyar. Bu karşılaştırmadan iki liste çıkar ve ikisi de işe yarar.

Botun istediği ve taramanın bulamadığı adresler olası öksüz adreslerdir, o kadar. Araç bunları olası kategorilere ayırır, örneğin parametreli adresler ya da eski yönlendirmeler, sonucu ise size bırakır. Taramanın bulduğu ama istenmeyen adresler, bu dönemde o bot tarafından görülmemiş olarak belirtilir. Kısa bir günlük penceresi, bir sayfanın yok sayılıp sayılmadığı hakkında hiçbir şey söylemez.

Bu özellik isteğe bağlıdır. Website Audit kurulu değilse seçim kutusu hiç görünmez ve günlük analizi aynı şekilde çalışır.

Erişim günlüklerinizi nerede bulursunuz

Çoğu barındırma paneli bunları «raw access logs» benzeri bir adla sunar. Kendi yönettiğiniz bir sunucuda Apache varsayılan olarak /var/log/apache2/access.log dosyasına, Nginx ise /var/log/nginx/access.log dosyasına yazar.

Biçim, ikisinin de fabrikadan yazdığı alışıldık combined biçimi olmalıdır. Kaynak sunucunun önündeki Cloudflare, CDN ya da yük dengeleyici, sunucunun gördüğünü değiştirir. Günlükleri tarayıcıya gerçekten yanıt veren katmandan alın.

Dosyaya ne olur

İşlem sunucuda, bellekte gerçekleşir. Günlüğün kendisi ne diske ne de veritabanına yazılır. Kaydedilecek bir proje ve geçmiş yoktur. Geriye yalnızca IP adresi doğrulama sonuçlarının kısa ömürlü önbelleği kalır. İçinde sayfa adresleri, istemci işaretleri ya da istek verileri bulunmaz.

12 MB üzerindeki dosyalar ilk 12 MB'a kırpılır. Orta ölçekli bir sitede bu genellikle birkaç günlük trafiktir. Yükleme baştan reddediliyorsa sizi sınırlayan sunucunuzun post_max_size ayarıdır, araç değil.

Log File Analyzer diğer araçlara karşı

Günlük analizi genelde ya bir hesap tablosu uğraşıdır ya da pahalı bir platformun içine gömülü bir modül. Burada ise dosyayı okuyup tabloları veren tek bir sayfa. «Duruma göre» ibaresi, o özelliğin bazı araçlarda veya üst paketlerde bulunduğu anlamına gelir.

Sık sorulan sorular

• Hangi günlük biçimi kabul ediliyor?

  Apache ve Nginx'in varsayılan olarak yazdığı alışıldık combined biçimi. Her satırda bir IP adresi, zaman damgası, istek, durum kodu ve istemci tanımlayıcısı bulunmalıdır. Okunamayan satırlar atlanır ve sayılır, böylece dosyanın anlaşılıp anlaşılmadığını görürsünüz.

• Herhangi bir şey saklanıyor mu?

  Hayır. İşleme sunucuda bellekte yapılır ve sonuç tarayıcınıza geri döner. Ne diske ne de bir veritabanına hiçbir şey yazılmaz, geçmiş de yoktur çünkü araç durum tutmaz.

• Ne büyüklükte dosya inceleyebilirim?

  Çalıştırma başına 12 MB'a ve 300 000 satıra kadar. Daha büyük dosyalar reddedilmek yerine kırpılır. Yükleme araca ulaşmadan başarısız oluyorsa yükseltmeniz gereken sınır sunucunuzun post_max_size ayarıdır.

• Botların gerçek olduğunu nereden bilirim?

  Botlar istemci tanımlayıcısından tanınır ve bunu herkes taklit edebilir. Sayıları kanıt değil, güçlü bir ipucu olarak alın. Tek bir bot inandırıcı olmayan bir hacim gösteriyorsa, harekete geçmeden önce IP adreslerinden bir örneklemi ters DNS sorgusuyla doğrulayın.

• Günlüğümde neden hiç bot yok?

  Genellikle günlükler yanlış katmandan gelir. Kaynak sunucunuzun önünde Cloudflare veya bir CDN varsa, isteklerin çoğunu o katman yanıtlar ve kaynak onları hiç görmez. Günlükleri kenardan alın.

• Website Audit'e de ihtiyacım var mı?

  Hayır. Günlük analizi kendi başına eksiksizdir. Website Audit yalnızca karşılaştırmayı ekler; bu karşılaştırma günlükleri bir taramayla karşılaştırır ve olası öksüz adresleri ile günlük döneminde görülmeyen adresleri listeler. O olmadan alan gizli kalır.

• Hangi pakete ihtiyacım var?

  Günlük analizi Pro paketinden itibaren kullanılabilir. Hesabınızın güncel durumunu görmek için aracı açın.

• Buraya ne sıklıkla bakmalıyım?

  Durağan bir sitede ayda bir yeterlidir. Bir göç, yeniden tasarım ya da ani trafik düşüşünden sonra daha erken bakın, çünkü günlük tarayıcının tepkisini sıralamalar yansıtmadan önce gösterir.

Sıralamalar sonucu anlatır. Günlükler o sonucu doğuran davranışı anlatır. Bir günlük dosyası yükleyin ve tarayıcıların ne yaptığını görün.