SEO Log File Analyzer

Perayap memberi tahu Anda apa yang ada di situs Anda. Log server memberi tahu apa yang sebenarnya dilakukan Google dengannya. SEO Log File Analyzer membaca log akses Anda. Ia menunjukkan perayap mana yang datang, seberapa sering, dan ke alamat mana. Ia juga menunjukkan berapa banyak anggaran penelusuran yang hilang dalam kesalahan. Analisis log Anda sekarang: unggah berkas atau tempelkan beberapa ribu baris, tidak ada yang disimpan.

Inilah satu-satunya kumpulan data dalam optimasi mesin pencari yang tidak bisa ditebak. Peringkat, tayangan, dan statistik penelusuran selalu sampai kepada Anda dari tangan kedua. Log akses adalah catatan mentah setiap permintaan yang benar-benar dijawab server Anda. Mesin Anda sendiri yang menulisnya.

Apa yang ditunjukkan log

Setelah diunggah, alat ini memisahkan lalu lintas perayap sungguhan dari yang lain. Lalu memecahnya menjadi angka yang bisa Anda gunakan.

• Perayap mana yang singgah. Setiap perayap dikenal beserta jumlah kunjungan, alamat unik, dan sebaran kode status yang diterimanya.
• Seberapa sering mereka datang. Frekuensi penelusuran per hari, sehingga penurunan atau lonjakan terlihat, bukan diduga.
• Untuk apa waktunya dipakai. Alamat Anda yang paling sering ditelusuri, dan itu jarang berupa daftar yang Anda kira.
• Di mana penelusuran hilang. Pengalihan, galat 404, pembatasan laju, dan galat server, masing-masing sebagai bagian dari permintaan, dengan alamat terkait.

Perayap kecerdasan buatan punya tampilan sendiri

GPTBot, ClaudeBot, dan PerplexityBot kini menyumbang bagian nyata dari lalu lintas otomatis. Selain itu perilakunya jauh berbeda dari Googlebot. Mereka terdaftar terpisah, dengan jumlah kunjungan dan tanggal terakhir terlihat.

Aktivitas perayap kecerdasan buatan menunjukkan apakah perayap semacam itu menemukan dan mengunduh konten Anda. Operator kadang mendokumentasikannya. Dalam hal itu setiap perayap ditandai sebagai perayap pelatihan, pencarian, atau pengunduh atas permintaan pengguna. Kunjungan tidak menjamin pencantuman maupun kutipan dalam jawaban kecerdasan buatan.

Efisiensi penelusuran dan ke mana penelusuran pergi

Efisiensi penelusuran hanya layak dibicarakan dengan bukti, dan log adalah bukti itu. Setiap respons digolongkan menurut maknanya. Berhasil, tidak berubah (304 bukan pemborosan), pengalihan, 404 dan 410, pembatasan laju, galat server. Setiap golongan adalah bagian dari permintaan bot, lengkap dengan alamatnya.

Di situs besar kejutan biasanya tersembunyi justru di sini. Parameter pada alamat, pola daftar dan arsip, serta pengalihan lama dapat menelan sebagian besar penelusuran. Alat ini mengelompokkannya menurut pola dan menampilkan bagian, jumlah permintaan, dan jumlah alamat unik. Alat menandainya sebagai kemungkinan inefisiensi, bukan masalah yang terbukti. Penilaian tetap milik Anda.

Membandingkan log dengan hasil penelusuran

Jika Anda juga memakai DiagnoSEO Website Audit, pilih proyek yang sudah ditelusuri. Penganalisis lalu menjajarkan kedua kumpulan data. Dari perbandingan itu muncul dua daftar dan keduanya berguna.

Alamat yang diminta bot dan tidak ditemukan oleh penelusuran adalah alamat yang mungkin yatim, tidak lebih. Alat ini menyusunnya ke dalam kategori yang mungkin, misalnya alamat berparameter atau pengalihan lama, dan menyerahkan kesimpulan kepada Anda. Alamat yang ditemukan penelusuran dan tidak diminta tercatat sebagai tidak terlihat oleh bot itu pada periode ini. Jendela log yang pendek tidak mengatakan apa pun tentang apakah sebuah halaman diabaikan.

Fitur ini tidak wajib. Tanpa Website Audit terpasang, kotak pilihan tidak muncul sama sekali dan analisis log tetap bekerja sama saja.

Di mana menemukan log akses Anda

Sebagian besar panel hosting menyediakannya dengan nama semacam «raw access logs». Pada server yang Anda kelola sendiri, Apache menulis secara baku ke /var/log/apache2/access.log dan Nginx ke /var/log/nginx/access.log.

Formatnya harus format combined yang lazim, dan itulah yang ditulis keduanya sejak awal. Cloudflare, jaringan CDN, atau penyeimbang beban di depan server asal mengubah apa yang dilihat server itu. Ambil log dari lapisan yang benar-benar menjawab perayap.

Apa yang terjadi pada berkas

Pemrosesan berlangsung di server, di dalam memori. Log itu sendiri tidak ditulis ke disk maupun ke basis data. Tidak ada proyek untuk disimpan dan tidak ada riwayat. Satu-satunya yang tersimpan adalah singgahan berumur pendek berisi hasil pemeriksaan alamat IP. Di dalamnya tidak ada alamat halaman, penanda klien, atau data permintaan.

Berkas di atas 12 MB dipotong menjadi 12 MB pertama. Pada situs berukuran menengah itu biasanya lalu lintas beberapa hari. Jika unggahan ditolak sejak awal, yang membatasi Anda adalah post_max_size server Anda, bukan alatnya.

Log File Analyzer dibandingkan alat lain

Analisis log biasanya berupa latihan di lembar sebar atau modul yang terkubur dalam platform mahal. Di sini ia satu halaman saja yang membaca berkas dan mengembalikan tabelnya kepada Anda. Tanda «bergantung» berarti kemampuan itu ada pada sebagian alat atau pada paket yang lebih tinggi.

Pertanyaan yang sering diajukan

• Format log apa yang diterima?

  Format combined yang lazim, yang ditulis Apache dan Nginx secara baku. Setiap baris memerlukan alamat IP, penanda waktu, permintaan, kode status, dan penanda klien. Baris yang tak terbaca dilewati dan dihitung, sehingga Anda tahu apakah berkasnya dipahami.

• Apakah ada yang disimpan?

  Tidak. Pemrosesan berlangsung di server dalam memori, dan hasilnya kembali ke peramban Anda. Tidak ada yang ditulis ke cakram atau basis data, dan riwayat tidak ada karena alat ini tidak menyimpan keadaan.

• Seberapa besar berkas yang bisa saya analisis?

  Hingga 12 MB per jalan dan hingga 300.000 baris. Berkas yang lebih besar dipotong, bukan ditolak. Jika unggahan gagal bahkan sebelum mencapai alat, yang perlu dinaikkan adalah post_max_size server Anda.

• Bagaimana saya tahu perayapnya asli?

  Perayap dikenali dari penanda klien, dan itu bisa dipalsukan siapa saja. Anggap angkanya petunjuk kuat, bukan bukti. Jika satu perayap menunjukkan jumlah yang sulit dipercaya, periksa sebagian alamat IP-nya dengan kueri DNS terbalik sebelum bertindak.

• Mengapa tidak ada perayap sama sekali di log saya?

  Biasanya log berasal dari lapisan yang keliru. Jika Cloudflare atau jaringan CDN berada di depan server asal Anda, lapisan itu sendiri yang menjawab sebagian besar permintaan dan server asal tak pernah melihatnya. Ambil log dari tepi jaringan.

• Apakah saya juga memerlukan Website Audit?

  Tidak. Analisis log lengkap dengan sendirinya. Website Audit hanya menambahkan perbandingan, yang menyandingkan log dengan penelusuran dan mendaftar alamat yang mungkin yatim serta alamat yang tidak terlihat pada periode log. Tanpanya kotak pilihan tetap tersembunyi.

• Paket mana yang saya perlukan?

  Analisis log tersedia mulai dari paket Pro ke atas. Buka alatnya untuk melihat keadaan akun Anda saat ini.

• Seberapa sering sebaiknya menengok ke sini?

  Pada situs yang stabil, sebulan sekali sudah cukup. Tengoklah lebih awal setelah pemindahan, perombakan tampilan, atau penurunan lalu lintas mendadak, karena log menunjukkan reaksi perayap sebelum peringkat sempat mencerminkannya.

Peringkat bercerita tentang hasilnya. Log bercerita tentang perilaku yang menghasilkannya. Unggah berkas log dan lihat apa yang telah dilakukan para perayap.