SEO Log File Analyzer

Pārlūkprogramma pasaka, kas jūsu vietnē ir. Servera žurnāli pasaka, ko Google ar to patiesībā dara. SEO Log File Analyzer izlasa jūsu piekļuves žurnālus. Tas parāda, kuri roboti nāk, cik bieži un uz kurām adresēm. Tas parāda arī, cik daudz pārmeklēšanas budžeta pazūd kļūdās. Analizējiet žurnālus tūlīt: augšupielādējiet failu vai ielīmējiet dažus tūkstošus rindu, nekas netiek glabāts.

Šī ir vienīgā datu kopa meklētājprogrammu optimizācijā, ko nevar uzminēt. Pozīcijas, rādījumi un pārmeklēšanas statistika jūs sasniedz vienmēr no otrām rokām. Piekļuves žurnāli ir neapstrādāts ieraksts par ikvienu pieprasījumu, uz kuru jūsu serveris tiešām atbildēja. Tos raksta jūsu pašu mašīna.

Ko parāda žurnāli

Pēc augšupielādes rīks atdala īsto robotu plūsmu no visa pārējā. Pēc tam sadala to skaitļos, ar kuriem var strādāt.

• Kuri pārmeklētāji bija klāt. Katrs zināmais robots ar apmeklējumu skaitu, unikālajām adresēm un saņemto stāvokļa kodu sadalījumu.
• Cik bieži viņi nāca. Pārmeklēšanas biežums pa dienām, lai kritums vai lēciens būtu redzams, nevis minēts.
• Kam viņi veltīja laiku. Jūsu visbiežāk pārmeklētās adreses, un tas reti ir tas saraksts, kuru gaidījāt.
• Kur pārmeklēšana pazūd. Pāradresācijas, 404 kļūdas, tempa ierobežojumi un servera kļūdas, katrs kā pieprasījumu daļa, ar attiecīgajām adresēm.

Mākslīgā intelekta robotiem ir savs skats

GPTBot, ClaudeBot un PerplexityBot šodien veido reālu automātiskās plūsmas daļu. Turklāt tie uzvedas pavisam citādi nekā Googlebot. Tie ir uzskaitīti atsevišķi, ar apmeklējumu skaitu un pēdējās ierašanās datumu.

Mākslīgā intelekta robotu darbība rāda, vai zināmi šādi roboti atrod un lejupielādē jūsu saturu. Operators to reizēm dokumentē. Tad katrs robots tiek atzīmēts kā apmācības, meklēšanas vai lejupielādējošs pēc lietotāja pieprasījuma. Apmeklējums negarantē ne iekļaušanu, ne citēšanu mākslīgā intelekta atbildēs.

Pārmeklēšanas efektivitāte un kurp tā virzās

Par pārmeklēšanas efektivitāti vērts runāt tikai ar pierādījumiem, un žurnāli ir tie pierādījumi. Katra atbilde tiek klasificēta pēc nozīmes. Veiksmīga, nav mainīts (304 nav izšķērdēšana), pāradresācijas, 404 un 410, tempa ierobežojums, servera kļūdas. Katra klase ir robota pieprasījumu daļa ar adresēm.

Lielā vietnē pārsteigums parasti slēpjas tieši šeit. Adrešu parametri, sarakstu un arhīvu raksti un vecas pāradresācijas var aprīt lielu pārmeklēšanas daļu. Rīks tos grupē pēc raksta un rāda daļu, pieprasījumu skaitu un unikālo adrešu skaitu. Tas atzīmē tos kā iespējamas neefektivitātes, ne kā apstiprinātas problēmas. Spriedums paliek jums.

Žurnālu salīdzināšana ar pārmeklēšanu

Ja lietojat arī DiagnoSEO Website Audit, izvēlieties jau pārmeklētu projektu. Analizators tad noliek abas datu kopas blakus. No šī salīdzinājuma rodas divi saraksti, un abi noder.

Adreses, ko robots pieprasīja un ko pārmeklēšana neatklāja, ir iespējami bāreņu adreses, ne vairāk. Rīks tās sakārto ticamās kategorijās, piemēram, adreses ar parametriem vai vecas pāradresācijas, un secinājumu atstāj jums. Pārmeklēšanas atrastās adreses, ko robots nepieprasīja, ir norādītas kā šajā periodā neredzētas. Īss žurnāla logs neko nepasaka par to, vai lapa tiek ignorēta.

Šī iespēja nav obligāta. Bez uzstādīta Website Audit izvēles lodziņš vienkārši neparādās, un žurnālu analīze darbojas tieši tāpat.

Kur atrast savus piekļuves žurnālus

Lielākā daļa mitināšanas vadības paneļu piedāvā tos ar nosaukumu, kas līdzinās «raw access logs». Serverī, ko pārvaldāt paši, Apache pēc noklusējuma raksta uz /var/log/apache2/access.log, bet Nginx uz /var/log/nginx/access.log.

Formātam jābūt parastajam combined, un tieši tādu abi raksta jau no sākuma. Cloudflare, CDN tīkls vai slodzes līdzsvarotājs priekšā izcelsmes serverim maina to, ko šis serveris redz. Lejupielādējiet žurnālus no tā slāņa, kas robotam patiešām atbild.

Kas notiek ar failu

Apstrāde notiek serverī atmiņā. Pats žurnāls netiek rakstīts ne diskā, ne datubāzē. Nav projekta, ko saglabāt, un nav vēstures. Paliek vienīgi īslaicīgs IP adrešu pārbaudes rezultātu kešs. Tajā nav lapu adrešu, klienta apzīmējumu vai pieprasījumu datu.

Faili, kas lielāki par 12 MB, tiek apgriezti līdz pirmajiem 12 MB. Vidēja lieluma vietnē tā parasti ir vairāku dienu plūsma. Ja augšupielāde tiek noraidīta uzreiz, jūs ierobežo jūsu servera post_max_size, nevis rīks.

Log File Analyzer salīdzinājumā ar citiem rīkiem

Žurnālu analīze citādi ir vai nu vingrinājums izklājlapā, vai modulis, aprakts dārgā platformā. Šeit tā ir viena vienīga lapa, kas izlasa failu un atdod jums tabulas. Apzīmējums «atkarīgs» nozīmē, ka iespēja pastāv daļā rīku vai augstākās paketēs.

Biežākie jautājumi

• Kādu žurnāla formātu pieņem?

  Parasto combined formātu, ko Apache un Nginx raksta pēc noklusējuma. Katrā rindā jābūt IP adresei, laika zīmogam, pieprasījumam, stāvokļa kodam un klienta apzīmējumam. Nelasāmās rindas tiek izlaistas un saskaitītas, tāpēc redzat, vai fails tika saprasts.

• Vai kaut kas tiek glabāts?

  Nē. Apstrāde notiek serverī atmiņā, un rezultāts atgriežas jūsu pārlūkprogrammā. Nekas netiek ierakstīts diskā vai datubāzē, un vēstures nav, jo rīks neuztur stāvokli.

• Cik lielu failu varu analizēt?

  Līdz 12 MB vienā palaišanā un līdz 300 000 rindām. Lielāki faili tiek apgriezti, nevis noraidīti. Ja augšupielāde neizdodas vēl pirms rīka, jāpaaugstina jūsu servera post_max_size.

• Kā zināt, ka roboti ir īsti?

  Robotus atpazīst pēc klienta apzīmējuma, un to var viltot jebkurš. Uztveriet skaitļus kā spēcīgu norādi, nevis pierādījumu. Ja viens robots rāda neticamu apjomu, pārbaudiet tā IP adrešu izlasi ar apgrieztu DNS vaicājumu, pirms kaut ko darāt.

• Kāpēc manā žurnālā nav neviena robota?

  Parasti žurnāli nāk no nepareizā slāņa. Ja priekšā jūsu izcelsmes serverim stāv Cloudflare vai CDN tīkls, šis slānis pats atbild uz lielāko daļu pieprasījumu, un izcelsme tos nekad neredz. Lejupielādējiet žurnālus no tīkla malas.

• Vai man vajag arī Website Audit?

  Nē. Žurnālu analīze ir pašpietiekama. Website Audit pievieno tikai salīdzinājumu, kas salīdzina žurnālus ar pārmeklēšanu un uzskaita iespējami bāreņu adreses, kā arī adreses, kas žurnāla periodā nav redzētas. Bez tā lauks paliek paslēpts.

• Kāda pakete man vajadzīga?

  Žurnālu analīze pieejama no Pro paketes un augstāk. Atveriet rīku, lai redzētu sava konta pašreizējo stāvokli.

• Cik bieži šeit vērts ieskatīties?

  Stabilā vietnē pietiek reizi mēnesī. Ieskatieties agrāk pēc pārcelšanas, dizaina maiņas vai pēkšņa plūsmas krituma, jo žurnāls parāda pārmeklētāja reakciju, pirms to paspēj atspoguļot pozīcijas.

Pozīcijas stāsta par iznākumu. Žurnāli stāsta par uzvedību, kas to radīja. Augšupielādējiet žurnāla failu un paskatieties, ko pārmeklētāji darīja.