구글 Lighthouse에 에이전틱 브라우징 추가 llms.txt 웹 표준 시대 도래
구글이 개발자 도구 Lighthouse에 AI 에이전트 호환성을 측정하는 에이전틱 브라우징 항목을 추가했습니다. llms.txt 표준과 AI 시대 웹 개발 전략을 심층 분석합니다.
구글(Google)이 웹 성능 분석 도구 라이트하우스(Lighthouse) 에 새로운 실험적 항목을 추가했습니다. 이름은 에이전틱 브라우징(Agentic Browsing) , AI 에이전트가 웹사이트를 얼마나 잘 이해하고 활용할 수 있는지를 측정하는 항목입니다. 기존 라이트하우스 점수가 성능, 접근성, SEO(검색 최적화) 등을 측정했다면, 이제 “AI 에이전트가 이 사이트를 잘 사용할 수 있는가”라는 새로운 기준이 추가된 것입니다.
이것이 왜 중요한가. AI 에이전트가 사용자를 대신해 웹을 탐색하고, 예약을 하고, 정보를 수집하고, 구매를 완료하는 시대가 오고 있습니다. 이 에이전트들이 특정 웹사이트를 잘 활용할 수 없다면, 그 사이트는 에이전트가 연결해주는 사용자들에게 보이지 않게 됩니다. 마치 과거 검색 엔진이 등장했을 때 SEO를 무시한 사이트들이 검색 결과에서 사라졌던 것처럼, 이제 AI 에이전트 최적화가 새로운 가시성 기준이 되어가고 있습니다.
기사 원문 보기: 2026년 5월 22일 (금) AI 브리핑 - AI코리아24
라이트하우스란 무엇이며 에이전틱 브라우징 항목은 무엇을 측정하는가
라이트하우스(Lighthouse)는 구글이 제공하는 오픈소스 웹 성능 분석 도구입니다. 크롬(Chrome) 개발자 도구에 내장되어 있으며, 웹사이트의 성능, 접근성, 검색 최적화, 보안 등을 분석하여 점수와 개선 방안을 제공합니다. 웹 개발자들이 일상적으로 활용하는 표준 도구입니다.
새로 추가된 에이전틱 브라우징 항목은 기존과 다른 방식으로 작동합니다. 기존 항목들이 0에서 100 사이의 점수를 제공했다면, 에이전틱 브라우징은 통과/미통과(passed/failed) 비율로 결과를 보여줍니다. 아직 실험적 단계이고 최종 표준이 아님을 반영한 설계입니다.
측정 항목은 네 가지입니다.
첫째, WebMCP API 통합 여부입니다. WebMCP(Web Model Context Protocol)는 구글이 개발한 기술로, 개발자가 AI 에이전트가 사이트의 로직과 폼에 직접 접근할 수 있도록 노출하는 인터페이스입니다. 쉽게 말해, 에이전트가 사이트와 구조적으로 상호작용할 수 있는 통로를 만드는 것입니다.
둘째, 접근성 트리(Accessibility Tree) 구조화 여부입니다. 접근성 트리는 웹사이트의 구조를 기계가 읽을 수 있는 형태로 표현한 것입니다. 원래는 시각 장애인을 위한 스크린 리더(screen reader)가 활용하는 구조인데, AI 에이전트도 이 구조를 통해 사이트의 내용을 파악합니다.
셋째, 누적 레이아웃 이동(CLS, Cumulative Layout Shift) 수치입니다. 페이지 로딩 중 콘텐츠가 갑자기 이동하는 현상을 측정합니다. 에이전트가 버튼을 클릭하려는 순간 레이아웃이 바뀌면 클릭이 실패할 수 있습니다.
넷째, llms.txt 파일 존재 여부입니다. llms.txt는 AI 모델과 에이전트에게 사이트의 구조와 목적을 설명하는 파일입니다.
llms.txt란 무엇이며 왜 중요한가
llms.txt 는 robots.txt(검색 엔진 크롤러에게 사이트 접근 규칙을 알려주는 파일)와 유사한 개념입니다. robots.txt가 검색 엔진 봇을 위한 안내서라면, llms.txt는 대형언어모델(LLM)과 AI 에이전트를 위한 안내서입니다.
사이트 루트에 위치하는 이 파일에는 사이트의 목적, 주요 콘텐츠 구조, AI가 활용할 수 있는 API, 사용 제한 사항 등을 명시합니다. 예를 들어 온라인 쇼핑몰이라면 “이 사이트는 의류 판매 사이트입니다. 상품 검색은 /api/search를 통해 가능하며, 장바구니 추가는 /api/cart를 사용합니다”와 같은 내용을 담을 수 있습니다.
에어비앤비(Airbnb)를 예로 들면, 라이트하우스 에이전틱 브라우징 검사에서 접근성 트리가 제대로 구성되지 않았고 llms.txt 파일도 없어 3개 항목 중 1개만 통과했다는 결과가 나왔습니다. 세계적으로 유명한 서비스조차 아직 AI 에이전트 대응 준비가 되어 있지 않다는 것을 보여주는 사례입니다.
흥미로운 점은 구글 자신이 AI 검색에서 llms.txt의 효용성에 회의적이라는 입장을 밝혔다는 것입니다. AI 검색(즉, 구글 자신의 AI 오버뷰 같은 기능)에는 기존 SEO가 더 중요하다는 입장입니다. 그러나 에이전트가 직접 사이트와 상호작용하는 경우에는 llms.txt가 유용하다는 구분이 있습니다.
AEO와 GEO 기존 SEO와 어떻게 다른가
에이전틱 브라우징 등장과 함께 AEO(Agent Experience Optimization, 에이전트 경험 최적화) 와 GEO(Generative Engine Optimization, 생성형 검색 최적화) 라는 개념이 떠오르고 있습니다.
기존 SEO(Search Engine Optimization, 검색 엔진 최적화)는 구글, 네이버 같은 검색 엔진이 페이지를 어떻게 순위 매기는지에 맞춰 사이트를 최적화하는 것입니다. AEO는 AI 에이전트가 사이트와 얼마나 잘 상호작용할 수 있는지에 맞추는 것이고, GEO는 ChatGPT나 퍼플렉시티(Perplexity) 같은 생성형 AI가 검색 결과를 제공할 때 해당 사이트의 내용이 포함될 가능성을 높이는 것입니다.
그러나 구글은 GEO를 “신화”라고 표현하며, 기존의 좋은 SEO 관행을 따르는 것으로 충분하다는 입장을 밝혔습니다. 에이전트와의 직접 상호작용을 위한 AEO는 실제로 필요한 최적화이지만, AI 검색 결과를 위한 별도의 GEO 전략은 과장된 것이라는 시각입니다.
개발자들이 지금 당장 해야 할 것은 무엇인가
구글은 에이전틱 브라우징 최적화를 위해 개발자들에게 몇 가지 구체적인 권고 사항을 제시했습니다.
시맨틱 HTML(Semantic HTML, 의미가 담긴 HTML 구조) 을 사용하라는 것이 첫 번째입니다. 단순히 보기 좋은 페이지를 만드는 것이 아니라, 각 요소가 무엇인지 기계가 이해할 수 있도록 명확한 태그를 사용해야 합니다. 버튼은 <button>, 링크는 <a>, 헤딩은 <h1>~<h6> 등을 적절히 활용하는 기본에 충실해야 합니다.
ARIA 레이블(ARIA labels, 접근성을 위한 보조 설명) 을 올바르게 작성하는 것이 두 번째입니다. 시각적으로는 명확한 아이콘 버튼이 화면 낭독기나 AI 에이전트에게는 의미 없는 요소로 보일 수 있습니다. aria-label="검색 버튼" 같은 설명을 추가하면 에이전트가 해당 요소의 기능을 이해할 수 있습니다.
레이아웃 이동 최소화가 세 번째입니다. 광고, 동적 콘텐츠 등으로 인한 레이아웃 이동은 에이전트의 상호작용을 방해합니다. CLS 점수를 낮추는 것이 에이전트 친화적 사이트 설계의 기본입니다.
llms.txt 파일 추가는 상대적으로 간단하게 실행할 수 있는 조치입니다. 사이트의 목적과 구조를 마크다운 형식으로 작성한 텍스트 파일을 루트 경로에 추가하면 됩니다.
한국 웹 개발자와 기업에게 미치는 영향
에이전틱 브라우징 최적화는 아직 실험적 단계이고 즉각적인 SEO 순위 변화를 가져오지는 않습니다. 그러나 AI 에이전트 사용이 확산될수록 이 준비도가 비즈니스 경쟁력에 영향을 줄 시점이 올 것입니다.
한국 기업들이 운영하는 이커머스, 예약 플랫폼, 금융 서비스 사이트들이 AI 에이전트 대응 준비를 얼마나 갖추고 있는지 점검이 필요합니다. AI 에이전트가 사용자 대신 숙소를 예약하거나 항공권을 구매하려 할 때, 국내 플랫폼들이 이 에이전트와 원활하게 상호작용할 수 있어야 경쟁에서 뒤처지지 않습니다.
또한 llms.txt 표준이 정식화되면, 한국어 콘텐츠를 대상으로 하는 AI 에이전트가 사이트를 정확히 이해하기 위한 한국어 llms.txt 작성 가이드라인도 필요해질 것입니다.
주목해야 할 포인트 웹의 주요 이용자가 인간에서 AI로 바뀌는 시대
에이전틱 브라우징 최적화가 시사하는 더 큰 그림은 이것입니다. 웹사이트의 주요 방문자 중 상당 비중이 인간이 아닌 AI 에이전트가 되는 시대가 오고 있다는 것입니다. 이미 봇 트래픽이 전체 웹 트래픽의 상당 부분을 차지하지만, 앞으로의 에이전트 트래픽은 단순한 크롤링이 아니라 실제로 서비스를 이용하는 방문자와 같은 역할을 합니다.
이 전환을 먼저 준비하는 기업이 AI 에이전트가 매개하는 새로운 형태의 고객을 먼저 확보하게 됩니다. 지금 당장 llms.txt를 추가하고, 접근성 트리를 정비하고, WebMCP API를 검토하는 것은 그 준비의 시작입니다. 트렌드를 앞서는 개발자와 기업이 다음 세대 웹 생태계의 주도권을 잡을 것입니다.
#구글Lighthouse #에이전틱브라우징 #llms.txt #WebMCP #AI에이전트 #웹표준 #AEO