Google, Chrome Lighthouse에 llms.txt 검사 기능 추가

(searchengineland.com)

구글이 크롬 라이트하우스(Lighthouse)에 'Agentic Browsing' 카테고리를 신설하고 llms.txt 파일 존재 여부를 검사하는 기능을 추가함에 따라, 검색 엔진 최적화(SEO)를 넘어 AI 에이전트의 효율적인 웹 탐색을 돕는 새로운 최적화 전략의 중요성이 부상하고 있습니다.

이 글의 핵심 포인트

1구글 크롬 라이트하우스에 'Agentic Browsing' 감사 카테고리 신설
2llms.txt 파일 존재 여부를 AI 에이전트의 탐색 효율성 지표로 검사
3llms.txt는 검색 순위(SEO) 직접 영향보다는 에이전트의 효율적 탐색을 목적으로 함
4'Agentic Engine Optimization(AEO)' 개념과 마크다운 기반 콘텐츠의 중요성 부상
5AI 에이전트의 토큰 사용량 절감 및 정확한 정보 추출을 위한 구조적 최적화 필요

이 글에 대한 공공지능 분석

왜 중요한가?

웹의 패러다임이 인간 중심의 '검색'에서 AI 에이전트 중심의 '상호작용'으로 이동하고 있음을 시사합니다. llms.txt는 단순한 SEO 도구가 아니라 AI 에이전트가 웹사이트의 핵심 정보를 저비용·고효율로 파악하게 만드는 '에이전트 최적화(AEO)'의 핵심 요소가 될 것입니다.

어떤 배경과 맥락이 있나?

구글은 최근 AI Overviews 등 생성형 AI 검색 기능을 강화하고 있으며, 이에 따라 AI 에이전트가 웹을 탐색하는 'Agentic Browsing' 환경이 구축되고 있습니다. 이는 기존의 HTML 크롤링을 넘어, AI가 더 적은 토큰으로 더 정확한 정보를 추출할 수 있도록 돕는 구조적 최적화 요구를 반영합니다.

업계에 어떤 영향을 주나?

웹 개발자와 마케터는 기존 SEO 전략에 더해 AI 에이전트의 가독성을 높이는 'Agentic Engine Optimization'을 고려해야 합니다. 특히 API나 Markdown 기반의 구조화된 데이터를 제공하는 것이 AI 에이전트의 서비스 이용률을 높이는 경쟁력이 될 수 있습니다.

한국 시장에 어떤 시사점이 있나?

글로벌 시장을 타겟으로 하는 한국 스타트업은 AI 에이전트가 자사 서비스를 쉽게 이해하고 활용할 수 있도록 기술적 기반을 선제적으로 구축해야 합니다. 특히 개발자 문서나 제품 상세 페이지에 llms.txt를 도입하여 AI 기반 검색 및 자동화 도구에서의 점유율을 확보하는 전략이 필요합니다.

이 글에 대한 큐레이터 의견

이번 업데이트는 웹 생태계의 중심축이 '사람이 읽는 페이지'에서 'AI가 실행하는 페이지'로 확장되고 있음을 보여주는 중요한 신호입니다. 구글이 검색 순위와는 별개라고 선을 그었음에도 불구하고, Lighthouse라는 개발자 도구에 이 기능이 포함되었다는 것은 AI 에이전트의 효율성이 웹 성능의 새로운 표준(Standard)으로 자리 잡을 것임을 암시합니다.

창업자들은 이를 단순한 기술적 변화가 아닌, 새로운 마케팅 채널의 등장으로 해석해야 합니다. 향후 사용자의 상당수가 AI 에이전트를 통해 웹사이트를 방문하고 정보를 추출할 것이기에, llms.txt와 같은 파일은 AI 에이전트에게 자사 서비스의 '사용 설명서'를 제공하는 것과 같습니다. 이는 AI 에이전트가 자사 서비스를 추천하거나 실행할 때 발생할 수 있는 오류를 줄이고, 서비스의 정확한 기능을 전달하여 최종적인 전환율(Conversion Rate)을 높이는 강력한 도구가 될 것입니다.

원문 보기 →