LLMs.txt generator
Unesite svoju domenu. LLMs.txt generator pretražuje web-mjesto, bira stranice koje vrijedi pokazati AI sustavima, grupira ih u odjeljke i za svaku piše opis. Dobivate provjerenu llms.txt datoteku koju možete urediti prije objave.
Razlika je u sredini tog procesa. Generator ne istresa vaš sitemap u tekstualnu datoteku: URL-ove filtrira, važne stranice stavlja ispred, a opisi nastaju iz stvarnog sadržaja stranice, ne iz meta oznake.
Kako radi
- Unesite svoje web-mjesto. Ili navedite sitemap, ili zalijepite vlastiti popis URL-ova.
- Alat pretražuje i analizira. robots.txt, vaše sitemape i sadržaj svake stranice.
- Gradi i provjerava datoteku. Odjeljci, opisi i provjera usklađenosti.
- Pregledavate, uređujete i objavljujete. Ništa ne odlazi bez vašeg odobrenja.
Više od pretvarača sitemapa u llms.txt
Jednostavan generator radi jedan prolaz: ulazi sitemap, izlaze URL-ovi s meta opisima. Tako u objavljenu datoteku dospiju stranica za prijavu, košarica i stotinu praznih blog objava.
| Mogućnost | DiagnoSEO | Drugi generatori |
|---|---|---|
| Pretražuje stvarni sadržaj stranica | ✅ | Različito |
| Filtrira URL-ove bez vrijednosti | ✅ | Različito |
| Daje prednost važnim stranicama | ✅ | Različito |
| Stvara logične odjeljke | ✅ | Različito |
| Piše opise iz sadržaja stranice | ✅ | Različito |
| Piše na jeziku web-mjesta | ✅ | Različito |
| Ugrađena provjera | ✅ | Različito |
| Uređivanje prije preuzimanja | ✅ | Različito |
| Prikazuje izostavljene URL-ove i razlog | ✅ | Različito |
| Uspoređuje vaš postojeći llms.txt | ✅ | Različito |
| Generira llms-full.txt | ✅ | Različito |
Što LLMs.txt generator konkretno radi
- Prvo sitemap. Čita robots.txt te obrađuje indekse sitemapa i sitemape zapakirane gzipom.
- Rezervno pretraživanje. Nema sitemapa? Stranice pronalazimo preko unutarnjih poveznica s početne stranice.
- Paralelno dohvaćanje održava brzinu i kod većih pretraživanja.
- Pametan odabir URL-ova. Prednost imaju dokumentacija, proizvodi, usluge, cjenik, o nama i kontakt.
- Uklanjanje šuma. Datoteke, prijava, košarica, straničenje, arhive oznaka i datuma, parametri filtara.
- Vlastita isključenja. Dodajte dijelove URL-ova koje treba preskočiti, poput
/tag/ili?filter=. - Uravnoteženje odjeljaka sprječava da opsežan blog potisne dokumentaciju.
- Čišćenje naslova. „Cjenik | Marka” postaje „Cjenik”.
- Odjeljci H2 uz odjeljak
Optionalza sporedan sadržaj. - Sažetak i opisi stranica pisani iz stvarnog sadržaja, na jeziku vašeg web-mjesta.
- Zamjena iz meta opisa ako model nije dostupan, pa uvijek dobijete upotrebljivu datoteku.
- Provjera prije preuzimanja, uključujući kriterije Chrome Lighthousea.
- Usporedba s llms.txt datotekom koja je već objavljena na vašoj domeni.
- Prozirni izvori. Svaki uključeni URL je naveden i može se odznačiti; uz svaki izostavljeni stoji razlog.
- llms-full.txt s cjelovitim sadržajem stranica, iz istog pretraživanja.
Što je llms.txt
llms.txt je Markdown datoteka opisana u prijedlogu llmstxt.org, koji je Jeremy Howard (Answer.AI) objavio u rujnu 2024. i koji je u kolovozu 2026. ažuriran na v2. Riječ je o prijedlogu koji vodi zajednica, ne o standardu W3C-a ili IETF-a.
Struktura je kratka: H1 s nazivom web-mjesta (jedini obavezan element), sažetak u citatu, neobavezan odlomak konteksta, a zatim odjeljci H2 s Markdown poveznicama, gdje dvotočka uvodi kratku bilješku. Odjeljak pod nazivom Optional označava sadržaj koji agent smije preskočiti kad je kontekst uzak.
Datoteka može stajati u korijenu domene ili na bilo kojoj putanji unutar nje. v2 dopušta datoteke ograničenog dosega: /docs/llms.txt pokriva sve pod /docs/, a agenti trebaju koristiti najprecizniju odgovarajuću datoteku.
Što je llms-full.txt
llms-full.txt je običaj koji su proširile platforme za dokumentaciju i nije dio specifikacije. Umjesto poveznica s opisima nosi cjelovit sadržaj stranica u markdownu, spojen u jedan dokument.
Ima smisla ondje gdje korisnici postavljaju detaljna pitanja AI asistentima: dokumentacija, SaaS proizvodi, baze znanja. Obje datoteke nastaju iz istog pretraživanja pa ostaju usklađene.
llms.txt, sitemap.xml i robots.txt
Tri datoteke, tri zadatka. Ne zamjenjuju jedna drugu, a dobro održavano web-mjesto poslužuje sve tri.
| robots.txt | sitemap.xml | llms.txt | |
|---|---|---|---|
| Namijenjeno | Crawlerima | Tražilicama | Jezičnim modelima i agentima |
| Odgovara na | Što se smije pretraživati | Koji URL-ovi postoje | O čemu su ključne stranice |
| Format | Direktive | XML | Markdown |
| Sadrži opise | Ne | Ne | Da |
| Upravlja pristupom | Da | Ne | Ne |
| Doseg | Domena | Domena | Domena ili putanja |
Zašto bi je izdavač želio
- Kontrola. Vi birate koje stranice i opise izlažete, umjesto da model zaključuje iz HTML-a punog navigacije i skripti.
- Strojna čitljivost. Markdown je kompatibilnim agentima i alatima lakši za obradu od prikazane stranice.
- Ušteda konteksta. Sažeta karta stane u kontekstni prozor u koji cijelo web-mjesto nikad ne bi stalo.
- Niski troškovi. Ništa za održavanje u vašem stacku i nikakav utjecaj na performanse.
Format objavljuju timovi za dokumentaciju OpenAI-ja, Anthropica i Geminija, a automatski ga generiraju platforme poput Mintlifyja, GitBooka i Wixa te dodaci Yoast SEO i AIOSEO.
Što llms.txt ne radi
- Ne blokira crawlere. Upravljanje pristupom pripada robots.txt datoteci.
- Ne zamjenjuje ni robots.txt ni sitemap.xml.
- Ne jamči citiranje u ChatGPT-u, Perplexityju, Geminiju ni Claudeu.
- Nije potvrđen faktor rangiranja u Googleu.
- Nije obavezna, a primjena se razlikuje među AI sustavima.
- Ne nadoknađuje slab sadržaj ni web-mjesto nedostupno crawlerima.
Tko obećava više citiranja samo zbog datoteke, obećava nešto što danas nitko ne može dokazati. Vrijednost je u kontroli i čitljivosti.
Provjera i Chrome Lighthouse test
Chrome Lighthouse 13.3 dodao je eksperimentalnu kategoriju Agentic Browsing. Jedan od njezinih auditâ provjerava osnovna svojstva objavljene llms.txt datoteke: naslov H1, barem jednu pravu Markdown poveznicu u obliku [Naslov](URL) i duljinu veću od 50 znakova.
Generator oponaša provjere tog audita. Riječ je o provjeri strukture, ne o signalu rangiranja u Google pretraživanju. Za sam audit datoteka koja nedostaje smatra se neprimjenjivom, dok objavljena datoteka koja ga ne prolazi može biti prijavljena kao pogreška.
Zato provjera teče prije preuzimanja: struktura llmstxt.org, tri kriterija Lighthousea, duplicirani URL-ovi, poveznice na strane domene i veličina datoteke. Zaseban LLMs.txt checker i validator provjerava datoteku koja je već objavljena, uključujući rade li njezine poveznice.
Kako objaviti datoteku
Poslužite je kao običan tekst na adresi vasadomena.hr/llms.txt, uz robots.txt. Ako opisujete samo dio web-mjesta, postavite je na tu putanju, primjerice vasadomena.hr/docs/llms.txt. Nakon prijenosa otvorite adresu i provjerite vidite li Markdown, a ne stranicu 404.
| Platforma | Lokacija |
|---|---|
| cPanel ili dijeljeni hosting | /public_html/llms.txt |
| WordPress | Korijen web-mjesta, ne /wp-content/ |
| Next.js, Nuxt, Astro, React | /public/llms.txt |
| Laravel, Symfony | /public/llms.txt |
| Shopify | Sadržaj → Datoteke, zatim preusmjerite /llms.txt na prenesenu datoteku |
| Webflow | Postavke web-mjesta, vlastiti kod ili prijenos datoteke |
| Netlify, Vercel, GitHub Pages | Dodajte je u mapu public u repozitoriju |
Što pripada u datoteku
llms.txt je izbor, a ne arhiva. Za cjelovit popis URL-ova tu je sitemap.
- SaaS i dokumentacija: pregled proizvoda, cjenik, prvi koraci, API referenca, changelog.
- E-trgovina: kategorije, istaknuti proizvodi, dostava, povrati, tablice veličina. Bez varijanti, filtara i straničenja.
- Lokalne usluge: svaka usluga zasebno, područje rada, cjenik ili ponuda, o nama i kontakt.
- Izdavači: tematska čvorišta i bezvremenski tekstovi umjesto zadnjih pedeset objava.
Česta pitanja
-
Markdown datoteka s nazivom web-mjesta, kratkim sažetkom i popisom ključnih stranica s opisima. Jezičnim modelima i agentima daje sažetu kartu sadržaja umjesto da ga izvode iz HTML-a.
-
Ne. To je prijedlog koji vodi zajednica, opisan na llmstxt.org, trenutačno u v2, i nije ga ratificirao ni W3C ni IETF. Usklađenost sa specifikacijom ovdje znači ondje opisanu strukturu.
-
Ne. Nijedan sustav ga ne zahtijeva. Objavljujete ga dobrovoljno, da biste upravljali time što pokazujete kompatibilnim AI alatima i kako je to opisano.
-
Za to nema dokaza, a ovaj alat to ne obećava. Datoteka čini sadržaj čitljivijim i daje vam kontrolu nad opisima, ali nije potvrđen faktor rangiranja ni jamstvo citiranja.
-
Google navodi da datoteka nije potrebna za njegove AI značajke u pretraživanju. Neovisno o tome, Chrome Lighthouse može provjeriti osnovna svojstva objavljene datoteke u eksperimentalnim auditima. To je provjera strukture, ne signal rangiranja.
-
Poslužite je kao običan tekst u korijenu domene, uz robots.txt. v2 dopušta i datoteke na bilo kojoj putanji:
/docs/llms.txtpokriva sadržaj pod/docs/, a agenti trebaju koristiti najprecizniju datoteku. -
llms.txt je odabrani indeks poveznica s opisima. llms-full.txt sadrži cjelovit sadržaj stranica u markdownu. Prvi je karta, drugi teritorij, a samo prvi pripada specifikaciji.
-
Sitemap nabraja sve URL-ove za tražilice, bez opisa i bez hijerarhije. robots.txt upravlja pristupom crawlera. llms.txt je kratka odabrana karta s kontekstom, skrojena za kontekstni prozor modela.
-
Da. Bez sitemapa stranice se pronalaze preko unutarnjih poveznica s početne stranice, uz prednost za dokumentaciju, proizvode i usluge.
-
Da. Unutar dnevnog ograničenja dobivate cjelovitu datoteku, bez vodenog žiga i bez skraćenog pregleda. Plaćeni planovi povećavaju ograničenje stranica i dodaju llms-full.txt.
Izradite svoj llms.txt
Unesite domenu i preuzmite strukturiranu, provjerenu i izmjenjivu llms.txt datoteku spremnu za objavu. Bez ručnog prikupljanja URL-ova. Već imate datoteku? Provjerite je: LLMs.txt checker i validator.