본문으로 건너뛰기

모호한 목표를 확신 있는 결정으로 바꾸는 커머스 에이전트 구축하기

Google DeepMind가 제안하는 모호한 의도를 가진 사용자를 위한 멀티모달 협력형 커머스 에이전트 설계 및 평가 프레임워크.

이 요약은 AI가 원문을 분석해 생성했습니다. 정확한 내용은 원문 기준으로 확인하세요.

TL;DR

Google DeepMind의 Nidhi Vyas는 모호한 사용자 의도를 구체적인 구매 결정으로 이끄는 협력형 커머스 에이전트 설계 프레임워크를 발표했다. 기존의 단순 검색 래퍼 방식에서 벗어나 '탐색-연구-응답' 루프를 통해 사용자의 '분위기(vibe)'를 파악하고, 정보 이득이 가장 큰 질문을 우선적으로 던져 의사결정 효율을 극대화한다. 멀티모달 입력을 활용한 제약 조건 추출과 실시간 재고 반영, 그리고 자동 평가 도구(Autorater)를 통한 단계별 품질 관리가 시스템의 핵심이다. 이 접근법은 사용자가 자신의 요구사항을 정확한 용어로 표현하지 못하는 '표현의 간극'을 기술적으로 해소하는 데 기여한다.

챕터별 상세

00:00

기존 커머스 에이전트의 한계와 표현의 간극

현재 대부분의 쇼핑 에이전트는 검색창을 감싼 래퍼(Wrapper) 수준에 머물러 있으며, 사용자가 명확한 의도와 키워드를 가졌다고 가정한다. 하지만 실제 사용자는 구체적인 스펙보다는 모호한 '분위기(vibe)'나 영감을 가지고 접근하는 경우가 많아 시스템과의 표현 간극(Articulation Gap)이 발생한다. 에이전트의 진정한 역할은 사용자가 자신의 목표를 명확히 정의하도록 돕고, 모호한 의도에서 확신 있는 결정으로 나아가게 하는 것이다. 이를 위해 단순한 키워드 매칭이 아닌 사용자의 선호를 능동적으로 이끌어내는 협력적 구조가 필요하다.
02:03

협력적 쇼핑 루프: 탐색, 연구, 응답

모호한 의도를 처리하기 위해 '탐색(Discovery)-연구(Research)-응답(Response)'으로 구성된 Co-shopping Loop 프레임워크를 적용했다. 탐색 단계에서는 과거 대화와 개인적 맥락을 결합해 작업 상태를 구축하고, 연구 단계에서는 사용자의 선호를 가장 잘 이끌어낼 수 있는 멀티모달 전략을 결정한다. 마지막 응답 단계에서는 단순 텍스트가 아닌 표나 이미지 갤러리 등 최적의 형식으로 정보를 가공하여 전달한다. 이 루프는 사용자와 에이전트 간의 정렬(Alignment)을 지속적으로 구축하며 구매 여정을 가이드한다.
04:45

탐색 단계: 이미지와 맥락을 통한 상태 구축

탐색 단계는 사용자의 발화뿐만 아니라 참조 이미지와 개인적 맥락을 분석하여 '작업 상태(Working State)'를 정의하는 과정이다. 예산과 같은 '딱딱한 제약(Hard Constraints)'과 이미지가 암시하는 스타일 같은 '부드러운 제약(Soft Constraints)'을 구분하여 추출하고 각각에 신뢰도 점수를 부여한다. 특히 실시간 재고 상태처럼 답변의 유효성에 결정적인 변수들을 식별하여 실시간 업데이트 대상으로 관리한다. 모든 사실이 유지되는지, 제약 조건이 변경될 때 결과가 적절히 반응하는지(Counterfactual sensitivity)를 자동 평가 도구(Autorater)로 검증하여 상태의 정확성을 보장한다.

Counterfactual sensitivity는 입력값의 일부를 바꿨을 때 시스템의 출력이 논리적으로 타당하게 변하는지를 측정하는 지표이다.

json
WORKING_STATE = {
  goal: "redo my unfinished living room under $1800",
  session_history: previous_conversation,
  user_context: {
    location: "San Francisco",
    past_preferences: house_point_preferences
  },
  hard_constraints: {
    budget_max: 1800
  },
  soft_constraints: [
    { title: "modern", source: "inferred from image", confidence: 0.8 }
  ],
  must_refresh: [
    { inventory_count: "almost_instant" }
  ]
}

에이전트가 이미지와 맥락을 통해 구축하는 사용자의 현재 작업 상태 구조

08:21

연구 단계: 정보 이득이 높은 질문과 멀티모달 유도

에이전트는 단순히 질문 목록을 나열하는 대신, 현재 상태에서 '정보 이득(Information Gain)'이 가장 큰 질문을 전략적으로 선택한다. 예를 들어 거실 가구를 추천하기 전 '방의 너비'를 묻는 것은 다른 어떤 질문보다 추천 범위를 효과적으로 좁힐 수 있는 고가치 행동이다. 주관적인 스타일 선호를 파악할 때는 텍스트 질문보다 시각적 보드(Visual Board)를 제시하여 사용자의 클릭이나 호버링 신호를 수집하는 멀티모달 유도 방식을 사용한다. 이를 통해 사용자의 언어적 표현 능력을 넘어서는 실제 취향을 온톨로지에 매핑하여 정교한 추천 기반을 마련한다.
12:57

적응형 응답: 최적의 형식 선택과 품질 평가

최종 응답은 사용자의 질문 유형에 따라 가장 이해하기 쉬운 구조로 자동 조정된다. 기술적인 세부 사항은 구조화된 요약으로, 상품 간 비교는 대조표(Comparison Table)로, 미적인 영감은 시각적 갤러리 형식으로 제공한다. 응답의 품질은 형식의 적절성, 데이터 충실도(Data Fidelity), 사용자 행동 유도성(Actionability) 등을 기준으로 평가된다. 모델이 환각을 일으키지 않고 정확한 상품 정보를 전달하는지 확인하는 과정이 포함되며, 사용자가 다음 단계로 확신 있게 넘어갈 수 있도록 돕는 것이 최종 목표이다.
16:38

결론 및 질의응답: 에이전트 커머스의 미래

사용자는 깨끗한 쿼리가 아닌 '분위기'를 가지고 오므로 시스템은 이를 수용할 준비가 되어 있어야 하며, 시각적 도구와 비교를 통해 선호를 빠르게 드러내야 한다. 응답의 형식 자체가 모델 지능의 일부임을 인식하고 루프의 모든 단계를 자동 평가 도구로 측정하며 개선해야 한다. 질의응답에서는 판매자 측 온톨로지와의 협력 방안과 UCP(Universal Commerce Protocol)를 통한 표준화 가능성이 논의되었다. 또한 미래에는 사용자를 대신해 협상하고 구매하는 에이전트 간 상호작용이 중요해질 것이나, 현재는 사용자의 의사결정 과정을 돕는 상위 단계의 여정에 집중하고 있다.

용어 해설

모호한 의도(Fuzzy Intent)
사용자가 구체적인 키워드나 명확한 목표 없이 추상적인 느낌이나 분위기만 가지고 시스템에 접근하는 상태이다. 에이전트는 이러한 불분명한 요구사항을 분석하여 구체적인 선택지로 좁혀나가는 역할을 수행해야 한다. 이는 단순 검색과 차별화되는 에이전트의 핵심 역량이다.
표현의 간극(Articulation Gap)
사용자가 머릿속에 가진 아이디어나 선호를 검색 시스템이 이해할 수 있는 정확한 용어로 설명하지 못할 때 발생하는 차이이다. 쇼핑객은 종종 자신이 무엇을 원하는지 정확히 모르거나 적절한 단어를 찾지 못하며, 에이전트는 이를 메우기 위해 시각적 도구 등을 활용한다.
정보 이득(Information Gain)
특정 질문을 던졌을 때 얻을 수 있는 정보의 가치를 수치화한 개념이다. 에이전트는 단순히 체크리스트를 훑는 대신, 다음 단계의 의사결정에 가장 결정적인 영향을 미칠 질문(예: 가구 구매 시 방의 너비)을 우선적으로 선택하여 대화 효율성을 높인다.
온톨로지(Ontology)
지식이나 개념 간의 관계를 구조화한 체계이다. 커머스 에이전트 맥락에서는 사용자의 주관적인 제약 조건(예: '아늑한 스타일')을 실제 상품 카탈로그의 속성 및 데이터베이스 필드와 매핑하는 가교 역할을 수행한다.
멀티모달 유도(Multimodal Elicitation)
텍스트 대화뿐만 아니라 이미지, 클릭, 호버링 등 다양한 상호작용 방식을 통해 사용자의 숨겨진 선호도를 이끌어내는 기법이다. 주관적인 취향을 파악할 때 텍스트 질문보다 시각적 보드를 보여주는 것이 더 빠르고 정확한 피드백을 얻을 수 있다.

언급된 리소스

AI 분석 전체 내용 보기

AI 요약 · 북마크 · 개인 피드 설정 — 무료

출처 · 인용 안내

원문 발행 2026. 09. 02.수집 2026. 09. 02.출처 타입 YOUTUBE

인용 시 "요약 출처: AI Trends (aitrends.kr)"를 표기하고, 사실 확인은 원문 보기 기준으로 진행해 주세요. 자세한 기준은 운영 정책을 참고해 주세요.