llms.txt v2 출시 — 실제로 변경된 내용은 무엇일까요

(dev.to)

llms.txt v2 업데이트는 파일 형식의 변화보다는 에이전트가 정보를 찾는 방식과 경로 탐색 규칙을 표준화하여, AI 에이전트가 웹 콘텐츠를 더 정확하게 파악할 수 있도록 돕는 중요한 기술적 진보를 담고 있습니다.

이 글의 핵심 포인트

1llms.txt 파일의 기본 포맷은 v1과 호환되므로 별도의 마이그레이션이 필요 없음
2rel="describedby"와 rel="alternate"를 통해 에이전트의 정보 탐색 표준화
3.md와 .html.md 두 가지 URL 형태를 모두 공식적으로 허용하여 유연성 확보
4서브패스 내 llms.txt의 역할을 정의하여 경로별 구체적인 가이드 제공 가능
5기존의 컨텍스트 확장 도구 대신 에이전트가 직접 링크를 따라가는 방식으로 스펙 변경

이 글에 대한 공공지능 분석

왜 중요한가?

AI 에이전트가 웹사이트의 구조를 추측하지 않고도 정확한 마크다운 버전이나 관련 설명 파일을 찾을 수 있도록 표준화된 길잡이를 제공하기 때문입니다. 이는 LLM 기반 서비스의 데이터 수집 정확도를 결정짓는 핵심 요소가 됩니다.

어떤 배경과 맥락이 있나?

LLM 기반 검색 및 에이전트 기술이 급성장하면서, 웹사이트의 정보를 AI가 읽기 좋은 형태로 제공하려는 `llms.txt` 프로토콜이 확산되고 있습니다. 이번 v2는 그동안 파편화되어 있던 관행을 표준화하려는 시도입니다.

업계에 어떤 영향을 주나?

개발자는 간단한 헤더 설정이나 HTML 태그 추가만으로 자사 문서를 AI 친화적으로 만들 수 있으며, 이는 AI 에이전트의 인덱싱 품질을 결정짓는 경쟁력이 될 것입니다. 특히 서브패스 활용을 통해 대규모 문서 구조를 효율적으로 관리할 수 있습니다.

한국 시장에 어떤 시사점이 있나?

글로벌 서비스를 지향하는 한국 스타트업은 초기부터 v2 표준을 준수하여, Perplexity나 OpenAI 같은 글로벌 AI 에이전트가 자사 서비스를 정확하게 인지하고 추천할 수 있는 기술적 기반을 선제적으로 구축해야 합니다.

이 글에 대한 큐레이터 의견

이번 v2 업데이트는 '추측'의 영역을 '표준'의 영역으로 옮겼다는 점에서 매우 긍정적입니다. 특히 `rel="describedby"`와 같은 표준 링크 관계의 도입은 AI 에이전트가 웹의 구조를 파악하는 비용을 획기적으로 낮춰줄 것입니다. 이는 개발자에게 큰 부담을 주지 않으면서도, 자사 서비스의 가시성을 AI 생기태계 내에서 확보할 수 있는 실질적인 기회입니다.

다만, 서브패스 파일의 정의와 관련하여 에이전트가 상위 경로로 거슬러 올라가며 파일을 찾는 과정이 복잡해질 수 있다는 점은 주의해야 합니다. 만약 서버 설정(404/410 처리 등)이 미흡할 경우, 에이전트에게 잘못된 정보를 전달하거나 불필요한 요청을 유발할 리스크가 존재합니다. 따라서 스타트업은 단순히 파일을 만드는 것을 넘어, CDN 헤더나 서버 응답 코드를 정교하게 관리하여 AI 에이전트에게 신뢰할 수 있는 경로를 제공하는 운영 역량을 갖춰야 합니다.

원문 보기 →