llms.txt란? ChatGPT·Claude가 내 페이지를 읽게 하는 법
llms.txt는 AI가 사이트를 이해하도록 돕는 안내 파일입니다. 무엇인지, 효과가 있는지, 어떻게 만드는지 정리했습니다.
사람들이 검색창 대신 ChatGPT, Claude, Perplexity에 묻기 시작하면서 "AI가 내 페이지를 읽고 답에 써 주는가"가 새로운 관심사가 됐습니다. 이를 위해 제안된 것 중 하나가 llms.txt입니다.
llms.txt란
사이트 루트(/llms.txt)에 두는 마크다운 텍스트 파일입니다. llmstxt.org에서 제안한 형식으로, AI가 사이트를 빠르게 이해하도록 다음을 담습니다.
# 사이트 이름
> 이 사이트가 무엇인지 한두 문장
## 페이지
- [개인정보처리방침](https://example.com/privacy): 수집 항목과 보유 기간
- [고객 지원](https://example.com/support): 문의 방법과 자주 묻는 질문
robots.txt가 크롤러에게 "어디를 읽어도 되는지"를, sitemap.xml이 "어떤 페이지가 있는지"를 알려 준다면, llms.txt는 "이 사이트가 무엇이고 각 페이지가 무슨 내용인지"를 요약해 줍니다.
효과가 있을까
솔직히 말하면, llms.txt는 공식 표준이 아니고 모든 AI 서비스가 읽는다고 확인된 것도 아닙니다. 다만 다음 이유로 만들어 둘 가치는 있습니다.
- 만드는 비용이 거의 없습니다.
- AI 에이전트와 개발 도구 일부가 이 파일을 참고합니다.
- 페이지 제목과 설명을 정리하는 과정 자체가 검색 노출에도 도움이 됩니다.
AI 노출에 더 확실하게 영향을 주는 것은 따로 있습니다.
- robots.txt에서 AI 크롤러를 막지 않기: GPTBot, ClaudeBot, PerplexityBot 등
- 페이지마다 분명한 제목과 설명: title과 meta description
- 본문이 HTML로 바로 보이기: 스크립트를 실행해야 보이는 내용은 읽기 어렵습니다.
AI가 실제로 읽었는지 확인하기
AI 크롤러는 방문할 때 User-Agent에 이름을 남깁니다. 서버 로그에서 GPTBot, OAI-SearchBot, ChatGPT-User, ClaudeBot, PerplexityBot 같은 이름을 찾으면 됩니다. 이 중 ChatGPT-User처럼 사용자의 질문에 답하려고 실시간으로 읽어 가는 것도 있고, GPTBot처럼 학습 데이터를 모으는 것도 있습니다.
Statix에서는
Statix는 사이트마다 llms.txt, sitemap.xml, robots.txt를 자동으로 만듭니다. 페이지의 검색 설정(제목, 설명)이 그대로 llms.txt에 들어가고, "검색에 노출"을 끈 페이지는 빠집니다. 직접 쓰고 싶으면 사이트 설정에서 내용을 바꿀 수도 있습니다.
그리고 지표 화면에서 어떤 AI가 어느 페이지를 언제 읽어 갔는지 볼 수 있습니다. 로그를 뒤질 필요가 없습니다.