SEO Log File Analyzer

Un robot de accesare vă spune ce există pe site-ul dumneavoastră. Jurnalele serverului vă spun ce face Google cu el în realitate. SEO Log File Analyzer citește jurnalele de acces. Arată ce roboți vin, cât de des și la ce adrese. Arată și cât din bugetul de accesare se pierde în erori. Analizați jurnalele acum: încărcați un fișier sau lipiți câteva mii de rânduri, nimic nu se păstrează.

Acesta este singurul set de date din optimizarea pentru motoarele de căutare care nu poate fi ghicit. Pozițiile, afișările și statisticile de accesare ajung la dumneavoastră întotdeauna la mâna a doua. Jurnalele de acces sunt însemnarea brută a fiecărei cereri la care serverul chiar a răspuns. Le scrie propria dumneavoastră mașină.

Ce arată jurnalele

După încărcare, instrumentul separă traficul roboților adevărați de tot restul. Apoi îl descompune în cifre cu care se poate lucra.

• Ce roboți au trecut pe acolo. Fiecare robot cunoscut, cu numărul de accesări, adresele unice și distribuția codurilor de stare primite.
• Cât de des au venit. Frecvența de accesare pe zile, astfel încât o scădere sau un salt se vede, în loc să fie presupus.
• Pe ce și-au petrecut timpul. Cele mai accesate adrese ale dumneavoastră, și rareori este lista la care v-ați fi așteptat.
• Unde se pierde accesarea. Redirecționări, erori 404, limitări de ritm și erori de server, fiecare ca pondere a cererilor, cu adresele aferente.

Roboții inteligenței artificiale au propria vedere

GPTBot, ClaudeBot și PerplexityBot alcătuiesc astăzi o parte reală din traficul automat. Pe deasupra, se comportă cu totul altfel decât Googlebot. Sunt enumerați separat, cu numărul de accesări și data ultimei treceri.

Activitatea roboților de inteligență artificială arată dacă acei roboți cunoscuți găsesc și descarcă conținutul dumneavoastră. Operatorul documentează uneori acest lucru. Atunci fiecare robot este marcat ca robot de antrenare, de căutare sau care descarcă la cererea utilizatorului. O vizită nu garantează nici includerea, nici citarea în răspunsurile inteligenței artificiale.

Eficiența accesării și încotro merge accesarea

Despre eficiența accesării merită discutat doar cu dovezi, iar jurnalele sunt acea dovadă. Fiecare răspuns este clasificat după semnificația lui. Reușit, nemodificat (304 nu este risipă), redirecționări, 404 și 410, limitare de ritm, erori de server. Fiecare clasă este o pondere a cererilor robotului, împreună cu adresele.

Pe un site mare surpriza se ascunde de obicei chiar aici. Parametrii din adrese, tiparele de liste și arhive și redirecționările vechi pot înghiți o mare parte din accesare. Instrumentul le grupează după tipar și arată ponderea, numărul de cereri și numărul de adrese unice. Le marchează drept posibile ineficiențe, nu drept probleme confirmate. Judecata rămâne a dumneavoastră.

Compararea jurnalelor cu o accesare

Dacă folosiți și DiagnoSEO Website Audit, alegeți un proiect deja accesat. Analizatorul așază atunci cele două seturi de date unul lângă altul. Din această comparație ies două liste și amândouă sunt utile.

Adresele cerute de robot și nedescoperite de accesare sunt adrese posibil orfane, nimic mai mult. Instrumentul le împarte în categorii probabile, de pildă adrese cu parametri sau redirecționări vechi, iar concluzia v-o lasă dumneavoastră. Adresele găsite de accesare și necerute apar ca nevăzute de acel robot în această perioadă. O fereastră scurtă de jurnal nu spune nimic despre ignorarea unei pagini.

Această funcție nu este obligatorie. Fără Website Audit instalat, câmpul de selecție pur și simplu nu apare, iar analiza jurnalelor funcționează la fel.

Unde vă găsiți jurnalele de acces

Majoritatea panourilor de găzduire le oferă sub un nume asemănător cu «raw access logs». Pe un server administrat de dumneavoastră, Apache scrie implicit în /var/log/apache2/access.log, iar Nginx în /var/log/nginx/access.log.

Formatul trebuie să fie obișnuitul combined, exact cel pe care amândouă îl scriu din start. Cloudflare, o rețea CDN sau un echilibrator aflat în fața serverului de origine schimbă ceea ce vede acel server. Descărcați jurnalele din stratul care îi răspunde cu adevărat robotului.

Ce se întâmplă cu fișierul

Prelucrarea are loc pe server, în memorie. Jurnalul în sine nu este scris nici pe disc, nici într-o bază de date. Nu există proiect de salvat și nu există istoric. Singurul lucru păstrat este o memorie temporară de scurtă durată cu rezultatele verificării adreselor IP. Nu conține adrese de pagini, însemne ale clientului sau date ale cererilor.

Fișierele peste 12 MB sunt tăiate la primii 12 MB. Pe un site de dimensiune medie, asta înseamnă de obicei traficul câtorva zile. Dacă încărcarea este respinsă din start, vă limitează post_max_size al serverului dumneavoastră, nu instrumentul.

Log File Analyzer față de alte instrumente

Analiza jurnalelor este altfel ori un exercițiu într-o foaie de calcul, ori un modul îngropat într-o platformă scumpă. Aici este o singură pagină care citește un fișier și vă întoarce tabelele. Mențiunea «depinde» înseamnă că funcția există la o parte dintre instrumente sau în pachetele superioare.

Întrebări frecvente

• Ce format de jurnal este acceptat?

  Obișnuitul format combined pe care Apache și Nginx îl scriu implicit. Fiecare rând are nevoie de o adresă IP, o marcă de timp, cererea, un cod de stare și o însemnare a clientului. Rândurile care nu pot fi citite sunt sărite și numărate, așa că vedeți dacă fișierul a fost înțeles.

• Se păstrează ceva?

  Nu. Prelucrarea are loc pe server, în memorie, iar rezultatul se întoarce în browserul dumneavoastră. Nu se scrie nimic pe disc sau într-o bază de date, iar istoric nu există, fiindcă instrumentul nu menține nicio stare.

• Cât de mare poate fi fișierul?

  Până la 12 MB pe rulare și până la 300 000 de rânduri. Fișierele mai mari sunt tăiate în loc să fie respinse. Dacă încărcarea eșuează încă dinainte de instrument, trebuie ridicat post_max_size al serverului dumneavoastră.

• De unde știu că roboții sunt adevărați?

  Roboții sunt recunoscuți după însemnarea clientului, iar aceasta poate fi falsificată de oricine. Luați cifrele drept indiciu puternic, nu drept dovadă. Dacă un singur robot arată un volum greu de crezut, verificați un eșantion din adresele lui IP printr-o interogare DNS inversă înainte de a acționa.

• De ce nu apare niciun robot în jurnalul meu?

  De obicei jurnalele vin din stratul greșit. Dacă în fața serverului de origine stă Cloudflare sau o rețea CDN, acel strat răspunde singur la majoritatea cererilor, iar originea nu le vede niciodată. Descărcați jurnalele de la marginea rețelei.

• Am nevoie și de Website Audit?

  Nu. Analiza jurnalelor este completă în sine. Website Audit adaugă doar comparația, care pune jurnalele față în față cu o accesare și enumeră adresele posibil orfane, precum și adresele nevăzute în perioada jurnalului. Fără el câmpul rămâne ascuns.

• De ce pachet am nevoie?

  Analiza jurnalelor este disponibilă de la pachetul Pro în sus. Deschideți instrumentul ca să vedeți starea actuală a contului dumneavoastră.

• Cât de des merită să vă uitați aici?

  Pe un site stabil, o dată pe lună este de ajuns. Uitați-vă mai devreme după o mutare, o schimbare de design sau o scădere bruscă de trafic, fiindcă jurnalul arată reacția robotului înainte ca pozițiile să apuce să o reflecte.

Pozițiile povestesc despre rezultat. Jurnalele povestesc despre comportamentul care l-a produs. Încărcați un fișier de jurnal și vedeți ce au făcut roboții.