SEO Log File Analyzer

Ένα πρόγραμμα ανίχνευσης σάς λέει τι υπάρχει στον ιστότοπό σας. Τα αρχεία καταγραφής του διακομιστή λένε τι κάνει ο Google με αυτά στην πράξη. Το SEO Log File Analyzer διαβάζει τα αρχεία πρόσβασης. Δείχνει ποια ρομπότ έρχονται, πόσο συχνά και σε ποιες διευθύνσεις. Δείχνει και πόσο από τον προϋπολογισμό ανίχνευσης χάνεται σε σφάλματα. Αναλύστε τα αρχεία τώρα: ανεβάστε ένα αρχείο ή επικολλήστε μερικές χιλιάδες γραμμές, τίποτα δεν αποθηκεύεται.

Είναι το μόνο σύνολο δεδομένων στη βελτιστοποίηση που δεν μαντεύεται. Οι θέσεις, οι εμφανίσεις και τα στατιστικά ανίχνευσης φτάνουν σε εσάς πάντα από δεύτερο χέρι. Τα αρχεία πρόσβασης είναι η ωμή καταγραφή κάθε αιτήματος που ο διακομιστής σας όντως απάντησε. Τα γράφει η δική σας μηχανή.

Τι δείχνουν τα αρχεία

Μετά την αποστολή το εργαλείο ξεχωρίζει την κίνηση των πραγματικών ρομπότ. Έπειτα την αναλύει σε αριθμούς με τους οποίους δουλεύετε.

• Ποια ρομπότ πέρασαν. Κάθε γνωστό ρομπότ με τις επισκέψεις, τις μοναδικές διευθύνσεις και την κατανομή των κωδικών κατάστασης.
• Πόσο συχνά ήρθαν. Συχνότητα ανίχνευσης ανά ημέρα, ώστε μια πτώση ή μια έξαρση να φαίνεται αντί να εικάζεται.
• Σε τι αφιέρωσαν χρόνο. Οι πιο πολυανιχνευμένες διευθύνσεις σας, που σπάνια είναι η λίστα που περιμένατε.
• Πού χάνεται η ανίχνευση. Ανακατευθύνσεις, σφάλματα 404, όρια ρυθμού και σφάλματα διακομιστή, καθένα ως μερίδιο των αιτημάτων, με τις σχετικές διευθύνσεις.

Τα ρομπότ τεχνητής νοημοσύνης έχουν δική τους προβολή

Το GPTBot, το ClaudeBot και το PerplexityBot αποτελούν πια πραγματικό μέρος της αυτόματης κίνησης. Επιπλέον συμπεριφέρονται εντελώς διαφορετικά από το Googlebot. Καταγράφονται χωριστά, με τις επισκέψεις και την ημερομηνία τελευταίας άφιξης.

Η δραστηριότητα ανιχνευτών τεχνητής νοημοσύνης δείχνει αν γνωστοί τέτοιοι ανιχνευτές βρίσκουν και κατεβάζουν το περιεχόμενό σας. Ο πάροχος ενίοτε το τεκμηριώνει. Τότε κάθε ανιχνευτής σημειώνεται ως εκπαίδευσης, αναζήτησης ή λήψης κατόπιν αιτήματος. Μια επίσκεψη δεν εγγυάται ούτε ένταξη ούτε αναφορά στις απαντήσεις τεχνητής νοημοσύνης.

Αποδοτικότητα ανίχνευσης και πού πηγαίνει

Για την αποδοτικότητα αξίζει να μιλάμε μόνο με στοιχεία. Τα αρχεία καταγραφής είναι αυτά τα στοιχεία. Κάθε απόκριση ταξινομείται κατά τη σημασία της. Επιτυχής, χωρίς αλλαγή (το 304 δεν είναι σπατάλη), ανακατευθύνσεις, 404 και 410, όριο ρυθμού, σφάλματα διακομιστή. Κάθε κλάση είναι μερίδιο των αιτημάτων, με τις διευθύνσεις.

Σε μεγάλο ιστότοπο η έκπληξη κρύβεται συνήθως εδώ. Οι παράμετροι διευθύνσεων, τα μοτίβα λιστών και αρχείων και οι παλιές ανακατευθύνσεις μπορούν να απορροφήσουν μεγάλο μέρος της ανίχνευσης. Το εργαλείο τα ομαδοποιεί κατά μοτίβο και δείχνει το μερίδιο, τα αιτήματα και τις μοναδικές διευθύνσεις. Τα σημειώνει ως πιθανές αναποτελεσματικότητες, όχι ως βεβαιωμένα προβλήματα. Η κρίση παραμένει δική σας.

Σύγκριση των αρχείων με μια ανίχνευση

Αν χρησιμοποιείτε και το DiagnoSEO Website Audit, επιλέξτε ένα ήδη ανιχνευμένο έργο. Ο αναλυτής τοποθετεί τότε τα δύο σύνολα δεδομένων δίπλα δίπλα. Από αυτή τη σύγκριση βγαίνουν δύο λίστες και οι δύο είναι χρήσιμες.

Οι διευθύνσεις που ζήτησε ο ανιχνευτής και δεν βρήκε η σάρωση είναι πιθανώς ορφανές, τίποτε παραπάνω. Το εργαλείο τις κατατάσσει σε πιθανές κατηγορίες, όπως διευθύνσεις με παραμέτρους ή παλιές ανακατευθύνσεις. Το συμπέρασμα μένει σε εσάς. Όσες βρήκε η σάρωση και δεν ζητήθηκαν αναφέρονται ως μη ιδωμένες σε αυτή την περίοδο. Ένα σύντομο παράθυρο δεν λέει τίποτε για το αν μια σελίδα αγνοείται.

Η δυνατότητα δεν είναι υποχρεωτική. Χωρίς εγκατεστημένο το Website Audit το πεδίο επιλογής απλώς δεν εμφανίζεται και η ανάλυση λειτουργεί το ίδιο.

Πού θα βρείτε τα αρχεία πρόσβασης

Οι περισσότεροι πίνακες φιλοξενίας τα προσφέρουν με όνομα σαν το «raw access logs». Σε διακομιστή που διαχειρίζεστε μόνοι, ο Apache γράφει εξ ορισμού στο /var/log/apache2/access.log και ο Nginx στο /var/log/nginx/access.log.

Η μορφή πρέπει να είναι η συνηθισμένη combined, ακριβώς αυτή που γράφουν και οι δύο εξαρχής. Το Cloudflare, ένα δίκτυο CDN ή ένας εξισορροπητής μπροστά από τον διακομιστή αλλάζει αυτό που εκείνος βλέπει. Κατεβάστε τα αρχεία από το στρώμα που απαντά πραγματικά στο ρομπότ.

Τι γίνεται με το αρχείο

Η επεξεργασία γίνεται στον διακομιστή, στη μνήμη. Το ίδιο το αρχείο δεν γράφεται ούτε στον δίσκο ούτε σε βάση δεδομένων. Δεν υπάρχει έργο προς αποθήκευση ούτε ιστορικό. Μένει μόνο μια βραχύβια προσωρινή μνήμη με τα αποτελέσματα ελέγχου διευθύνσεων IP. Δεν περιέχει διευθύνσεις σελίδων, σημάνσεις πελάτη ή δεδομένα αιτημάτων.

Τα αρχεία πάνω από 12 MB κόβονται στα πρώτα 12 MB. Σε ιστότοπο μεσαίου μεγέθους αυτό είναι συνήθως η κίνηση αρκετών ημερών. Αν η αποστολή απορριφθεί αμέσως, σας περιορίζει το post_max_size του διακομιστή σας.

Το Log File Analyzer απέναντι σε άλλα εργαλεία

Η ανάλυση αρχείων είναι αλλού άσκηση σε λογιστικό φύλλο ή ενότητα θαμμένη σε ακριβή πλατφόρμα. Εδώ είναι μία μόνο σελίδα που διαβάζει ένα αρχείο και σας δίνει τους πίνακες. Η ένδειξη «εξαρτάται» σημαίνει ότι η δυνατότητα υπάρχει σε μέρος των εργαλείων ή σε ανώτερα πακέτα.

Συχνές ερωτήσεις

• Ποια μορφή αρχείου γίνεται δεκτή;

  Η συνηθισμένη μορφή combined που γράφουν εξ ορισμού ο Apache και ο Nginx. Κάθε γραμμή χρειάζεται διεύθυνση IP, χρονική σήμανση, το αίτημα, κωδικό κατάστασης και ένδειξη του πελάτη. Οι μη αναγνώσιμες γραμμές παραλείπονται και μετριούνται, ώστε να δείτε αν το αρχείο έγινε κατανοητό.

• Αποθηκεύεται κάτι;

  Όχι. Η επεξεργασία γίνεται στον διακομιστή στη μνήμη και το αποτέλεσμα επιστρέφει στο πρόγραμμα περιήγησής σας. Τίποτα δεν γράφεται στον δίσκο ή σε βάση δεδομένων και ιστορικό δεν υπάρχει, καθώς το εργαλείο δεν κρατά κατάσταση.

• Πόσο μεγάλο αρχείο μπορώ να αναλύσω;

  Έως 12 MB ανά εκτέλεση και έως 300.000 γραμμές. Τα μεγαλύτερα αρχεία κόβονται αντί να απορρίπτονται. Αν η αποστολή αποτύχει πριν φτάσει στο εργαλείο, πρέπει να αυξήσετε το post_max_size του διακομιστή σας.

• Πώς ξέρω ότι τα ρομπότ είναι γνήσια;

  Τα ρομπότ αναγνωρίζονται από την ένδειξη του πελάτη, την οποία μπορεί να πλαστογραφήσει οποιοσδήποτε. Πάρτε τους αριθμούς ως ισχυρή ένδειξη, όχι ως απόδειξη. Αν ένα ρομπότ δείχνει απίθανο όγκο, ελέγξτε δείγμα των διευθύνσεων IP με αντίστροφο ερώτημα DNS.

• Γιατί δεν υπάρχει κανένα ρομπότ στο αρχείο μου;

  Συνήθως τα αρχεία προέρχονται από λάθος στρώμα. Αν μπροστά από τον διακομιστή σας βρίσκεται το Cloudflare ή ένα δίκτυο CDN, εκείνο απαντά μόνο του στα περισσότερα αιτήματα. Κατεβάστε τα αρχεία από την άκρη του δικτύου.

• Χρειάζομαι και το Website Audit;

  Όχι. Η ανάλυση αρχείων καταγραφής είναι πλήρης από μόνη της. Το Website Audit προσθέτει μόνο τη σύγκριση, η οποία αντιπαραβάλλει τα αρχεία με μια σάρωση και απαριθμεί πιθανώς ορφανές διευθύνσεις καθώς και διευθύνσεις μη ιδωμένες στην περίοδο. Χωρίς αυτό το πεδίο παραμένει κρυμμένο.

• Ποιο πακέτο χρειάζομαι;

  Η ανάλυση αρχείων είναι διαθέσιμη από το πακέτο Pro και πάνω. Ανοίξτε το εργαλείο για να δείτε την τρέχουσα κατάσταση του λογαριασμού σας.

• Πόσο συχνά αξίζει να κοιτάτε εδώ;

  Σε σταθερό ιστότοπο αρκεί μία φορά τον μήνα. Κοιτάξτε νωρίτερα μετά από μετακόμιση, ανασχεδιασμό ή απότομη πτώση κίνησης, γιατί το αρχείο δείχνει την αντίδραση του ρομπότ πριν προλάβουν να τη δείξουν οι θέσεις.

Οι θέσεις μιλούν για το αποτέλεσμα. Τα αρχεία μιλούν για τη συμπεριφορά που το δημιούργησε. Ανεβάστε ένα αρχείο καταγραφής και δείτε τι έκαναν τα ρομπότ.