llms.txt
llms.txt는 Markdown으로 작성해 웹사이트 루트에 두는 일반 텍스트 파일로, AI 시스템에 사이트에 대한 짧은 설명과 가장 중요한 페이지로 연결되는 선별된 링크 목록을 제공합니다. 현재는 제안 단계의 형식입니다.
왜 중요한가요?
웹 페이지는 사람을 위해 만들어져 내비게이션, 스크립트, 레이아웃을 함께 담고 있고, 이 때문에 모델이 핵심 내용을 찾기가 어려워집니다. llms.txt는 이 사이트가 무엇이고 기준이 되는 페이지가 어디에 있는지 알려 주는 깔끔한 진입점 역할을 합니다.
무엇을 담나요?
- 사이트명 또는 회사명을 적은 H1 제목.
- 인용문(blockquote) 형식의 짧은 요약.
- 한 줄 설명이 붙은 Markdown 링크를 섹션별로 정리한 목록: 제품, 문서, 가격, 정책, 연락처.
- 선택 사항으로, 핵심 페이지의 전체 본문을 담은 llms-full.txt 파일.
예시: 첫 줄에 # Acme Tools를 쓰고, 한두 문장으로 요약한 다음, ## Products 섹션에 제품 페이지 다섯 개를 각각 한 줄 설명과 함께 나열합니다. llms.txt 생성기로 파일을 만들 수 있습니다.
llms.txt와 관련 파일 비교
- robots.txt: 크롤러가 무엇을 가져가도 되는지 알려 줍니다. llms.txt는 접근을 허용하거나 막지 않으며, 무엇을 읽으면 좋은지 추천합니다.
- sitemap.xml: 색인을 위해 모든 URL을 나열합니다. llms.txt는 선별한 소수의 페이지를 맥락과 함께 나열합니다.
한계와 흔한 실수
- 커뮤니티에서 나온 제안일 뿐 공식 표준으로 확정된 것이 아니며, AI 제공업체마다 처리 방식이 다릅니다. 효과가 보장되는 수단이 아니라 비용이 적게 드는 권장 관행으로 보는 것이 적절합니다.
- 링크를 수백 개 나열하면 파일의 취지가 사라집니다. 선별해서 담아야 합니다.
- 오래된 채로 방치하는 것입니다. 파일에 적힌 가격과 제품명은 실제 사이트와 일치해야 합니다.
- 크롤링 접근 문제를 해결하는 대신 이 파일에 기대는 것입니다. robots.txt에서 AI 크롤러를 차단하고 있다면 llms.txt는 도움이 되지 않습니다.
자주 묻는 질문
- AI 엔진이 실제로 llms.txt를 읽나요?
- 지원 여부는 제공업체마다 다르고 문서로 공개되지 않은 경우도 있습니다. 게시하는 데 비용이 거의 들지 않고 사이트의 정돈된 요약을 계속 제공할 수 있으므로 관리할 가치는 있지만, 이것 하나만을 GEO 대책으로 삼아서는 안 됩니다.
- llms.txt는 어디에 두어야 하나요?
- 도메인의 루트에 둡니다. 예: https://example.com/llms.txt