SEO Log File Analyzer

Prehľadávač vám povie, čo na webe je. Serverové záznamy vám povedia, čo s tým Google naozaj robí. SEO Log File Analyzer číta vaše prístupové záznamy. Ukáže, ktoré roboty prichádzajú, ako často a na aké adresy. Ukáže tiež, koľko rozpočtu na prehľadávanie sa stratí v chybách. Analyzujte záznamy hneď: nahrajte súbor alebo vložte pár tisíc riadkov, nič sa neukladá.

Je to jediná sada údajov v optimalizácii pre vyhľadávače, ktorú sa nedá uhádnuť. Pozície, zobrazenia aj štatistiky prehľadávania sa k vám dostávajú vždy z druhej ruky. Prístupové záznamy sú surový zápis každej požiadavky, na ktorú váš server skutočne odpovedal. Píše ich váš vlastný stroj.

Čo záznamy ukazujú

Po nahratí nástroj oddelí prevádzku skutočných robotov od zvyšku. Potom ju rozloží na čísla, s ktorými sa dá pracovať.

• Ktoré prehľadávače prišli. Každý známy robot s počtom prístupov, jedinečnými adresami a rozložením stavových kódov, ktoré dostal.
• Ako často prichádzali. Frekvencia prehľadávania po dňoch, takže prepad či výkyv je vidieť namiesto odhadovania.
• Čomu venovali čas. Vaše najčastejšie prehľadávané adresy, čo býva len zriedka zoznam, ktorý by ste čakali.
• Kde sa prehľadávanie stráca. Presmerovania, chyby 404, obmedzenia tempa a chyby servera, každé ako podiel požiadaviek, s príslušnými adresami.

Roboty umelej inteligencie majú vlastné zobrazenie

GPTBot, ClaudeBot a PerplexityBot dnes tvoria skutočnú časť automatickej prevádzky. Navyše sa správajú úplne inak než Googlebot. Uvádzame ich osobitne, s počtom prístupov a dátumom poslednej návštevy.

Aktivita prehľadávačov umelej inteligencie ukazuje, či známe prehľadávače tohto druhu nachádzajú a sťahujú váš obsah. Prevádzkovateľ to niekedy dokumentuje. V takom prípade je každý prehľadávač označený ako tréningový, vyhľadávací alebo sťahujúci na žiadosť používateľa. Návšteva nezaručuje zaradenie ani citáciu v odpovediach umelej inteligencie.

Efektívnosť prehľadávania a kam prehľadávanie smeruje

O efektívnosti prehľadávania má zmysel hovoriť len s dôkazmi a záznamy sú tým dôkazom. Každá odpoveď je zaradená podľa svojho významu. Úspešná, nezmenené (304 nie je plytvanie), presmerovania, 404 a 410, obmedzenie tempa, chyby servera. Každá trieda je podiel požiadaviek robota, aj s adresami.

Na veľkom webe sa prekvapenie skrýva zvyčajne práve tu. Parametre v adresách, vzory výpisov a archívov a staré presmerovania dokážu pohltiť veľkú časť prehľadávania. Nástroj ich zoskupí podľa vzoru a ukáže podiel, počet požiadaviek a počet jedinečných adries. Označí ich ako možné neefektívnosti, nie ako potvrdené problémy. Úsudok zostáva na vás.

Porovnanie záznamov s prehľadávaním

Ak používate aj DiagnoSEO Website Audit, vyberte už prehľadaný projekt. Analyzátor potom položí obe sady údajov vedľa seba. Z toho porovnania vyjdú dva zoznamy a oba sa zídu.

Adresy, na ktoré sa robot pýtal a ktoré prehľadávanie neobjavilo, sú možno osirotené adresy, nič viac. Nástroj ich roztriedi do pravdepodobných kategórií, napríklad adresy s parametrami alebo staré presmerovania, a záver nechá na vás. Adresy nájdené prehľadávaním, na ktoré sa robot nepýtal, sú uvedené ako nevidené týmto robotom v tomto období. Krátke okno záznamu nehovorí nič o tom, či je stránka prehliadaná.

Táto funkcia je voliteľná. Bez nainštalovaného Website Auditu sa výber jednoducho neobjaví a analýza záznamov funguje rovnako.

Kde svoje prístupové záznamy nájdete

Väčšina hostingových panelov ich ponúka pod názvom typu «raw access logs». Na serveri, ktorý spravujete sami, zapisuje Apache štandardne do /var/log/apache2/access.log a Nginx do /var/log/nginx/access.log.

Formát musí byť obvyklý combined, čo je presne to, čo oba píšu od začiatku. Cloudflare, sieť CDN alebo vyvažovač záťaže pred pôvodným serverom mení to, čo tento server vidí. Stiahnite záznamy z vrstvy, ktorá robotovi skutočne odpovedá.

Čo sa so súborom stane

Spracovanie prebieha na serveri v pamäti. Samotný záznam sa nezapisuje na disk ani do databázy. Nie je čo uložiť ako projekt a nie je žiadna história. Jediné, čo zostáva, je krátkodobá vyrovnávacia pamäť výsledkov overenia adries IP. Neobsahuje adresy stránok, označenie klienta ani údaje požiadaviek.

Súbory nad 12 MB sa orežú na prvých 12 MB. Pri stredne veľkom webe to býva niekoľko dní prevádzky. Ak sa nahratie odmietne hneď, obmedzuje vás post_max_size vášho servera, nie nástroj.

Log File Analyzer oproti iným nástrojom

Analýza záznamov býva buď cvičením v tabuľkovom procesore, alebo modulom pochovaným v drahej platforme. Tu je to jediná stránka, ktorá prečíta súbor a vráti vám tabuľky. Označenie «závisí» znamená, že schopnosť je v časti nástrojov alebo vo vyšších balíkoch.

Časté otázky

• Aký formát záznamu sa prijíma?

  Obvyklý formát combined, ktorý Apache a Nginx píšu štandardne. Každý riadok potrebuje adresu IP, časovú pečiatku, požiadavku, stavový kód a označenie klienta. Nečitateľné riadky sa preskočia a spočítajú, takže uvidíte, či bol súbor pochopený.

• Ukladá sa niečo?

  Nie. Spracovanie prebieha na serveri v pamäti a výsledok sa vracia do vášho prehliadača. Nič sa nezapisuje na disk ani do databázy a história neexistuje, pretože nástroj si nedrží žiadny stav.

• Aký veľký súbor môžem analyzovať?

  Až 12 MB na jedno spustenie a až 300 000 riadkov. Väčšie súbory sa orežú, namiesto toho aby boli odmietnuté. Ak nahratie zlyhá ešte predtým, než sa dostane k nástroju, treba zvýšiť post_max_size vášho servera.

• Ako spoznám, že sú roboty skutočné?

  Roboty sa rozpoznávajú podľa označenia klienta a to môže ktokoľvek sfalšovať. Berte čísla ako silné vodítko, nie ako dôkaz. Ak jediný robot vykazuje neuveriteľný objem, overte vzorku jeho adries IP spätným dopytom DNS, skôr než začnete konať.

• Prečo v mojom zázname nie sú žiadne roboty?

  Záznamy zvyčajne pochádzajú z nesprávnej vrstvy. Ak pred vaším pôvodným serverom stojí Cloudflare alebo sieť CDN, odpovedá táto vrstva na väčšinu požiadaviek sama a pôvodný server ich nikdy nevidí. Stiahnite záznamy z okraja siete.

• Potrebujem k tomu aj Website Audit?

  Nie. Analýza záznamov je sama osebe úplná. Website Audit pridáva len porovnanie, ktoré porovná záznamy s prehľadávaním a vypíše možno osirotené adresy aj adresy nevidené v období záznamu.

• Aký balík potrebujem?

  Analýza záznamov je dostupná od balíka Pro vyššie. Otvorte nástroj a uvidíte aktuálny stav svojho účtu.

• Ako často sa sem treba pozerať?

  Pri stabilnom webe stačí raz za mesiac. Pozrite sa skôr po migrácii, prerobení dizajnu alebo náhlom prepade návštevnosti, pretože záznam ukáže reakciu prehľadávača skôr, než sa prejaví v pozíciách.

Pozície hovoria o výsledku. Záznamy hovoria o správaní, ktoré k nemu viedlo. Nahrajte súbor so záznamom a pozrite sa, čo prehľadávače robili.