내 에이전트는 드롭다운 메뉴를 볼 수 있었지만, 아무것도 선택할 수 없었어.
(dev.to)
AI 에이전트가 웹 페이지의 요소를 인식하면서도 조작하지 못했던 원인은 iframe과 Shadow DOM 등 복잡한 계층 구조를 탐색하지 못하는 불일치된 탐색 로직에 있었으며, 이는 도구 간 일관된 요소 탐색 메커니즘의 중요성을 시사합니다.
이 글의 핵심 포인트
- 1AI 에이전트가 요소를 인식(Snapshot)함에도 불구하고 조작(Select)하지 못하는 불일치 문제 발생
- 2원인은 Salesforce와 같은 복잡한 웹 구조(iframe, Shadow DOM)를 탐색하지 못하는 단순 쿼리 방식 사용
- 3