SEO Log File Analyzer

Roomaja ütleb teile, mis teie saidil on. Serveri logid ütlevad, mida Google sellega tegelikult teeb. SEO Log File Analyzer loeb teie pääsulogid. See näitab, millised robotid käivad, kui tihti ja millistel aadressidel. Samuti näitab, kui palju roomamise eelarvest kaob vigadesse. Analüüsige logisid kohe: laadige üles fail või kleepige paar tuhat rida, midagi ei salvestata.

See on otsingumootoritele optimeerimise ainus andmestik, mida ei saa ära arvata. Positsioonid, näitamised ja roomamise statistika jõuavad teieni alati teisest käest. Pääsulogid on toores märge iga päringu kohta, millele teie server tõesti vastas. Neid kirjutab teie enda masin.

Mida logid näitavad

Pärast üleslaadimist eraldab tööriist tõeliste robotite liikluse kõigest muust. Seejärel jaotab selle arvudeks, millega saab töötada.

• Millised roomajad käisid. Iga tuntud robot koos külastuste arvu, unikaalsete aadresside ja saadud olekukoodide jaotusega.
• Kui tihti nad tulid. Roomamise sagedus päevade kaupa, nii et langus või hüpe on näha, mitte oletatav.
• Millele nad aega kulutasid. Teie kõige rohkem roomatud aadressid, ja see on harva see nimekiri, mida ootasite.
• Kus roomamine kaob. Ümbersuunamised, 404 vead, tempo piirangud ja serveri vead, igaüks päringute osakaaluna, koos vastavate aadressidega.

Tehisintellekti robotid saavad oma vaate

GPTBot, ClaudeBot ja PerplexityBot moodustavad tänaseks tõelise osa automaatsest liiklusest. Pealegi käituvad nad hoopis teisiti kui Googlebot. Nad on loetletud eraldi, koos külastuste arvu ja viimase käigu kuupäevaga.

Tehisintellekti robotite tegevus näitab, kas tuntud sellised robotid leiavad ja laadivad teie sisu. Operaator vahel dokumenteerib seda. Siis on iga robot märgitud kui treening-, otsingu- või kasutaja soovil laadiv robot. Külastus ei taga kaasamist ega tsiteerimist tehisintellekti vastustes.

Roomamise tõhusus ja kuhu roomamine suundub

Roomamise tõhususest tasub rääkida ainult tõenditega ja logid on need tõendid. Iga vastus liigitatakse selle tähenduse järgi. Õnnestunud, muutmata (304 ei ole raisk), ümbersuunamised, 404 ja 410, tempo piiramine, serveri vead. Iga klass on roboti päringute osakaal koos aadressidega.

Suurel saidil peitub üllatus tavaliselt just siin. Aadresside parameetrid, loendite ja arhiivide mustrid ning vanad ümbersuunamised võivad neelata suure osa roomamisest. Tööriist rühmitab need mustri järgi ja näitab osakaalu, päringute arvu ja unikaalsete aadresside arvu. See märgib need võimalikeks ebatõhususteks, mitte kinnitatud probleemideks. Otsus jääb teile.

Logide võrdlemine roomamisega

Kui kasutate ka DiagnoSEO Website Auditit, valige juba roomatud projekt. Analüsaator asetab siis mõlemad andmestikud kõrvuti. Sellest võrdlusest sünnib kaks nimekirja ja mõlemad on kasulikud.

Aadressid, mida robot küsis ja mida roomamine ei avastanud, on võimalikud orbaadressid, mitte enam. Tööriist jagab need tõenäolistesse kategooriatesse, näiteks parameetritega aadressid või vanad ümbersuunamised, ja jätab järelduse teile. Roomamise leitud aadressid, mida robot ei küsinud, on märgitud kui sellel perioodil nägemata. Lühike logiaken ei ütle midagi selle kohta, kas lehte eiratakse.

See võimalus ei ole kohustuslik. Ilma paigaldatud Website Auditita valikukast lihtsalt ei ilmu ja logianalüüs töötab täpselt samamoodi.

Kust leiate oma pääsulogid

Enamik majutuse juhtpaneele pakub neid nime all, mis sarnaneb «raw access logs». Serveris, mida ise haldate, kirjutab Apache vaikimisi faili /var/log/apache2/access.log ja Nginx faili /var/log/nginx/access.log.

Vorming peab olema tavapärane combined, ja just seda mõlemad algusest peale kirjutavad. Cloudflare, CDN-võrk või koormuse jaotaja lähteserveri ees muudab seda, mida see server näeb. Laadige logid alla sellest kihist, mis robotile tegelikult vastab.

Mis failist saab

Töötlemine toimub serveris mälus. Logi ennast ei kirjutata ei kettale ega andmebaasi. Pole projekti, mida salvestada, ega ajalugu. Ainus, mis jääb, on lühiajaline IP-aadresside kontrolli tulemuste vahemälu. Selles pole lehtede aadresse, kliendi tähiseid ega päringuandmeid.

Üle 12 MB suurused failid lõigatakse esimese 12 MB peale. Keskmise suurusega saidil on see tavaliselt mitme päeva liiklus. Kui üleslaadimine lükatakse kohe tagasi, piirab teid teie serveri post_max_size, mitte tööriist.

Log File Analyzer teiste tööriistade kõrval

Logianalüüs on muidu kas harjutus arvutustabelis või moodul, mis on maetud kallisse platvormi. Siin on see üksainus leht, mis loeb faili ja annab teile tabelid. Märge «oleneb» tähendab, et võimalus on osas tööriistades või kõrgemates pakettides.

Korduma kippuvad küsimused

• Millist logivormingut aktsepteeritakse?

  Tavapärast combined vormingut, mida Apache ja Nginx vaikimisi kirjutavad. Igal real peab olema IP-aadress, ajatempel, päring, olekukood ja kliendi tähis. Loetamatud read jäetakse vahele ja loetakse kokku, nii et näete, kas fail sai loetud.

• Kas midagi salvestatakse?

  Ei. Töötlemine toimub serveris mälus ja tulemus läheb tagasi teie brauserisse. Midagi ei kirjutata kettale ega andmebaasi ja ajalugu ei ole, sest tööriist ei hoia olekut.

• Kui suurt faili saan analüüsida?

  Kuni 12 MB käivituse kohta ja kuni 300 000 rida. Suuremad failid lõigatakse, mitte ei lükata tagasi. Kui üleslaadimine ebaõnnestub juba enne tööriista, tuleb tõsta teie serveri post_max_size väärtust.

• Kuidas tean, et robotid on ehtsad?

  Roboteid tuntakse ära kliendi tähise järgi ja seda võib võltsida igaüks. Võtke numbreid tugeva vihjena, mitte tõendina. Kui üksik robot näitab ebausutavat mahtu, kontrollige valimit tema IP-aadressidest pöördpäringuga DNS-is, enne kui midagi ette võtate.

• Miks minu logis pole ühtegi robotit?

  Tavaliselt tulevad logid valest kihist. Kui teie lähteserveri ees on Cloudflare või CDN-võrk, vastab see kiht ise enamikule päringutest ja lähteserver ei näe neid kunagi. Laadige logid hoopis võrgu servast.

• Kas mul on vaja ka Website Auditit?

  Ei. Logianalüüs on iseseisev. Website Audit lisab ainult kõrvutuse, mis kõrvutab logid roomamisega ja loetleb võimalikud orbaadressid ning aadressid, mida logiperioodil ei nähtud. Ilma selleta jääb väli peidetuks.

• Millist paketti mul vaja on?

  Logianalüüs on saadaval alates Pro paketist ülespoole. Avage tööriist, et näha oma konto praegust seisu.

• Kui tihti tasub siia vaadata?

  Stabiilsel saidil piisab kord kuus. Vaadake varem pärast kolimist, kujunduse uuendust või ootamatut liikluse langust, sest logi näitab roomaja reaktsiooni enne, kui positsioonid jõuavad seda peegeldada.

Positsioonid räägivad tulemusest. Logid räägivad käitumisest, mis selle tekitas. Laadige üles logifail ja vaadake, mida roomajad on teinud.