Trình tạo LLMs.txt
Nhập tên miền của bạn. Trình tạo LLMs.txt thu thập dữ liệu trang web, chọn những trang đáng hiển thị cho hệ thống AI, nhóm chúng thành các phần và viết mô tả cho từng trang. Bạn nhận được tệp llms.txt đã kiểm tra, có thể chỉnh sửa trước khi xuất bản.
Khác biệt nằm ở giai đoạn giữa của quy trình. Trình tạo không đổ sơ đồ trang của bạn vào một tệp văn bản: các URL được lọc, trang quan trọng được ưu tiên, và mô tả sinh ra từ nội dung thực của trang chứ không phải từ thẻ meta.
Cách hoạt động
- Nhập trang web của bạn. Hoặc chỉ tới một sơ đồ trang, hoặc dán danh sách URL của riêng bạn.
- Trình tạo LLMs.txt thu thập và phân tích. robots.txt, các sơ đồ trang và nội dung của từng trang.
- Dựng và kiểm tra tệp. Các phần, mô tả và kiểm tra mức tuân thủ.
- Bạn xem lại, chỉnh sửa và xuất bản. Không gì được gửi đi khi chưa có sự đồng ý của bạn.
Hơn cả một công cụ chuyển sơ đồ trang sang llms.txt
Một trình tạo đơn giản chỉ chạy một lượt: sơ đồ trang vào, URL kèm mô tả meta ra. Đó là cách trang đăng nhập, giỏ hàng và một trăm bài blog trống rỗng lọt vào tệp đã xuất bản.
| Khả năng | DiagnoSEO | Trình tạo khác |
|---|---|---|
| Thu thập nội dung thực của trang | ✅ | Tùy nơi |
| Lọc bỏ URL không có giá trị | ✅ | Tùy nơi |
| Ưu tiên những trang quan trọng | ✅ | Tùy nơi |
| Tạo các phần hợp lý | ✅ | Tùy nơi |
| Viết mô tả từ nội dung trang | ✅ | Tùy nơi |
| Viết bằng ngôn ngữ của trang web | ✅ | Tùy nơi |
| Kiểm tra tích hợp sẵn | ✅ | Tùy nơi |
| Chỉnh sửa trước khi tải xuống | ✅ | Tùy nơi |
| Hiển thị URL bị bỏ qua và lý do | ✅ | Tùy nơi |
| So sánh với llms.txt hiện có của bạn | ✅ | Tùy nơi |
| Tạo llms-full.txt | ✅ | Tùy nơi |
Trình tạo LLMs.txt thực sự làm gì
- Ưu tiên sơ đồ trang. Đọc robots.txt và xử lý được chỉ mục sơ đồ trang cùng sơ đồ nén gzip.
- Thu thập dự phòng. Không có sơ đồ trang? Chúng tôi tìm các trang qua liên kết nội bộ từ trang chủ.
- Tải song song giúp cả những lượt thu thập lớn vẫn nhanh.
- Chọn URL thông minh. Tài liệu, sản phẩm, dịch vụ, bảng giá, giới thiệu và liên hệ được ưu tiên.
- Loại bỏ nhiễu. Tệp, đăng nhập, giỏ hàng, phân trang, kho lưu trữ thẻ và ngày tháng, tham số bộ lọc.
- Loại trừ tùy chọn. Thêm các đoạn URL cần bỏ qua, ví dụ
/tag/hoặc?filter=. - Cân bằng các phần ngăn một blog lớn lấn át tài liệu của bạn.
- Dọn tiêu đề. „Bảng giá | Thương hiệu” trở thành „Bảng giá”.
- Các phần H2 cùng phần
Optionaldành cho nội dung thứ yếu. - Tóm tắt và mô tả từng trang viết từ nội dung thực, bằng ngôn ngữ trang web của bạn.
- Dự phòng bằng mô tả meta khi không gọi được mô hình, nên bạn luôn nhận được tệp dùng được.
- Kiểm tra trước khi tải xuống, bao gồm các tiêu chí Chrome Lighthouse.
- So sánh với tệp llms.txt đã xuất bản trên tên miền của bạn.
- Nguồn minh bạch. Mọi URL được đưa vào đều có trong danh sách và có thể bỏ chọn; mỗi URL bị bỏ qua đều nêu lý do.
- llms-full.txt với toàn bộ nội dung trang, từ cùng một lượt thu thập.
llms.txt là gì
llms.txt là tệp Markdown được mô tả trong đề xuất llmstxt.org, do Jeremy Howard (Answer.AI) công bố vào tháng 9 năm 2024 và cập nhật lên v2 vào tháng 8 năm 2026. Đây là đề xuất do cộng đồng dẫn dắt, không phải chuẩn của W3C hay IETF.
Cấu trúc rất ngắn: một H1 mang tên trang web (phần bắt buộc duy nhất), một tóm tắt dạng trích dẫn, một đoạn ngữ cảnh tùy chọn, rồi các phần H2 chứa liên kết Markdown, trong đó dấu hai chấm mở đầu một ghi chú ngắn. Phần mang tên Optional đánh dấu nội dung mà tác nhân có thể bỏ qua khi ngữ cảnh eo hẹp.
Tệp có thể nằm ở gốc tên miền hoặc ở bất kỳ đường dẫn nào bên trong. v2 cho phép tệp giới hạn phạm vi: /docs/llms.txt bao phủ mọi thứ dưới /docs/, và tác nhân nên dùng tệp cụ thể nhất được áp dụng.
llms-full.txt là gì
llms-full.txt là một quy ước do các nền tảng tài liệu phổ biến hóa, không thuộc đặc tả. Thay vì liên kết kèm mô tả, nó chứa toàn bộ nội dung các trang dưới dạng Markdown, gộp thành một tài liệu.
Nó xứng đáng ở nơi người dùng đặt câu hỏi chi tiết cho trợ lý AI: tài liệu, sản phẩm SaaS, cơ sở tri thức. Cả hai tệp đều đến từ cùng một lượt thu thập nên luôn nhất quán.
llms.txt, sitemap.xml và robots.txt
Ba tệp, ba nhiệm vụ. Chúng không thay thế nhau, và một trang web được chăm sóc tốt sẽ phục vụ cả ba.
| robots.txt | sitemap.xml | llms.txt | |
|---|---|---|---|
| Dành cho | Trình thu thập dữ liệu | Công cụ tìm kiếm | Mô hình ngôn ngữ và tác nhân |
| Trả lời | Được phép thu thập những gì | Có những URL nào | Các trang chính nói về điều gì |
| Định dạng | Chỉ thị | XML | Markdown |
| Có mô tả | Không | Không | Có |
| Kiểm soát truy cập | Có | Không | Không |
| Phạm vi | Tên miền | Tên miền | Tên miền hoặc đường dẫn |
Vì sao nhà xuất bản có thể muốn có
- Quyền kiểm soát. Bạn chọn hiển thị trang nào và mô tả ra sao, thay vì để mô hình tự suy ra từ HTML đầy điều hướng và mã lệnh.
- Máy đọc được. Markdown dễ xử lý hơn cho tác nhân và công cụ tương thích so với một trang đã kết xuất.
- Tiết kiệm ngữ cảnh. Một bản đồ ngắn gọn vừa vặn trong cửa sổ ngữ cảnh mà cả trang web của bạn không bao giờ lọt vào.
- Chi phí thấp. Không có gì phải bảo trì trong hệ thống của bạn và không ảnh hưởng hiệu năng.
Định dạng này được các nhóm tài liệu của OpenAI, Anthropic và Gemini công bố, đồng thời được tạo tự động bởi các nền tảng như Mintlify, GitBook và Wix, cùng các plugin Yoast SEO và AIOSEO.
llms.txt không làm gì
- Nó không chặn trình thu thập dữ liệu. Kiểm soát truy cập thuộc về robots.txt.
- Nó không thay thế robots.txt hay sitemap.xml.
- Nó không đảm bảo được trích dẫn trong ChatGPT, Perplexity, Gemini hay Claude.
- Nó không phải yếu tố xếp hạng đã được Google xác nhận.
- Nó không bắt buộc, và mức độ sử dụng khác nhau giữa các hệ thống AI.
- Nó không bù đắp cho nội dung sơ sài hay trang web mà trình thu thập không tiếp cận được.
Ai hứa hẹn nhiều trích dẫn hơn chỉ nhờ tệp này là đang hứa điều mà hôm nay không ai chứng minh được. Giá trị nằm ở quyền kiểm soát và khả năng đọc.
Kiểm tra và bài test Chrome Lighthouse
Chrome Lighthouse 13.3 bổ sung hạng mục thử nghiệm Agentic Browsing. Một trong các bài kiểm tra của nó xác thực các thuộc tính cơ bản của llms.txt đã xuất bản: tiêu đề H1, ít nhất một liên kết Markdown thật dạng [Tiêu đề](URL), và độ dài trên 50 ký tự.
Trình tạo tái hiện các phép kiểm của bản đánh giá đó. Đây là kiểm tra cấu trúc, không phải tín hiệu xếp hạng trong Google Tìm kiếm. Với chính bản đánh giá, tệp không tồn tại được xem là không áp dụng, còn tệp đã xuất bản mà không đạt có thể bị báo là lỗi.
Vì thế việc kiểm tra chạy trước khi tải xuống: cấu trúc llmstxt.org, ba tiêu chí Lighthouse, URL trùng lặp, liên kết tới tên miền khác và kích thước tệp. Trình kiểm tra và xác thực LLMs.txt riêng biệt kiểm tra tệp đã lên mạng, bao gồm cả việc các liên kết còn hoạt động hay không.
Cách xuất bản tệp
Phục vụ tệp dưới dạng văn bản thuần tại tenmiencuaban.com/llms.txt, cạnh robots.txt. Nếu chỉ mô tả một phần trang web, hãy đặt tệp ở đường dẫn đó, ví dụ tenmiencuaban.com/docs/llms.txt. Sau khi tải lên, mở địa chỉ và xác nhận bạn thấy Markdown chứ không phải trang 404.
| Nền tảng | Vị trí |
|---|---|
| cPanel hoặc hosting dùng chung | /public_html/llms.txt |
| WordPress | Gốc trang web, không phải /wp-content/ |
| Next.js, Nuxt, Astro, React | /public/llms.txt |
| Laravel, Symfony | /public/llms.txt |
| Shopify | Nội dung → Tệp, sau đó chuyển hướng /llms.txt tới tệp đã tải lên |
| Webflow | Cài đặt trang web, mã tùy chỉnh hoặc tải tệp lên |
| Netlify, Vercel, GitHub Pages | Đưa tệp vào thư mục public trong kho mã |
Những gì nên nằm trong tệp
llms.txt là một bản chọn lọc, không phải kho lưu trữ. Danh sách URL đầy đủ đã có sơ đồ trang lo.
- SaaS và tài liệu: tổng quan sản phẩm, bảng giá, bắt đầu, tham chiếu API, changelog.
- Thương mại điện tử: danh mục, sản phẩm chủ lực, vận chuyển, đổi trả, bảng kích cỡ. Không phải biến thể, bộ lọc hay phân trang.
- Dịch vụ địa phương: từng dịch vụ riêng, khu vực phục vụ, bảng giá hoặc báo giá, giới thiệu và liên hệ.
- Nhà xuất bản: trang chủ đề và bài viết lâu bền thay vì năm mươi bài mới nhất.
Câu hỏi thường gặp
-
Một tệp Markdown chứa tên trang web, tóm tắt ngắn và danh sách các trang chính kèm mô tả. Nó cho mô hình ngôn ngữ và tác nhân một bản đồ ngắn gọn về nội dung, thay vì bắt chúng suy ra từ HTML.
-
Không. Đây là đề xuất do cộng đồng dẫn dắt, mô tả tại llmstxt.org, hiện ở v2, và chưa được W3C hay IETF phê chuẩn. Khi nói tuân thủ đặc tả, chúng tôi muốn nói tới cấu trúc mô tả ở đó.
-
Không. Không hệ thống nào yêu cầu tệp này. Bạn xuất bản nó một cách tự nguyện để kiểm soát những gì hiển thị cho công cụ AI tương thích và cách nó được mô tả.
-
Không có bằng chứng và chúng tôi không hứa điều đó. Tệp giúp nội dung dễ đọc hơn và cho bạn quyền kiểm soát mô tả, nhưng không phải yếu tố xếp hạng đã xác nhận hay bảo đảm được trích dẫn.
-
Google cho biết tệp này không cần thiết cho các tính năng AI trong Tìm kiếm. Riêng Chrome Lighthouse có thể xác thực các thuộc tính cơ bản của tệp đã xuất bản trong những bài kiểm tra thử nghiệm. Đó là kiểm tra cấu trúc, không phải tín hiệu xếp hạng.
-
Phục vụ dưới dạng văn bản thuần ở gốc tên miền, cạnh robots.txt. v2 cũng cho phép tệp ở bất kỳ đường dẫn nào:
/docs/llms.txtbao phủ nội dung dưới/docs/, và tác nhân nên dùng tệp cụ thể nhất. -
llms.txt là chỉ mục chọn lọc gồm liên kết kèm mô tả. llms-full.txt chứa toàn bộ nội dung trang dưới dạng Markdown. Cái đầu là bản đồ, cái sau là địa hình, và chỉ cái đầu thuộc về đặc tả.
-
Sơ đồ trang liệt kê mọi URL cho công cụ tìm kiếm, không mô tả và không phân cấp. robots.txt kiểm soát quyền truy cập của trình thu thập. llms.txt là bản đồ ngắn, chọn lọc kèm ngữ cảnh, vừa với cửa sổ ngữ cảnh của mô hình.
-
Có. Khi không có sơ đồ trang, các trang được tìm qua liên kết nội bộ từ trang chủ, ưu tiên tài liệu, sản phẩm và dịch vụ.
-
Có. Trong hạn mức hằng ngày, bạn nhận được tệp đầy đủ, không hình mờ và không bản xem trước bị cắt. Gói trả phí nâng hạn mức số trang và bổ sung llms-full.txt.
Tạo tệp llms.txt của bạn
Nhập tên miền và nhận tệp llms.txt có cấu trúc, đã kiểm tra và chỉnh sửa được, sẵn sàng xuất bản. Không cần thu thập URL thủ công. Đã có tệp rồi? Kiểm tra bằng Trình kiểm tra và xác thực LLMs.txt.