TL;DR
디지털 인화 서비스 기업 Popsa는 기존의 규칙 기반 알고리즘 한계를 극복하기 위해 Amazon Bedrock 기반의 생성형 AI를 도입했다. 메타데이터와 역 지오코딩을 결합한 검색 기반 퓨샷 프롬프팅 아키텍처를 구축하여 12개 언어로 창의적인 제목과 부제목을 자동 생성한다. Anthropic의 Claude 3 Haiku에서 Amazon Nova 모델군으로 전환하며 사용자 긍정 피드백이 71%에서 73%로 상승했고, 비용 효율성도 확보했다. 특히 ConverseStream API를 통해 첫 제안 생성 시간(TTFS)을 0.92초로 단축하며 사용자 경험을 획기적으로 개선했다.
배경
Amazon Bedrock API 사용법, 프롬프트 엔지니어링(Few-shot) 기초 지식, RAG(검색 증강 생성) 개념
대상 독자
생성형 AI를 활용해 사용자 경험을 개선하고 운영 비용을 최적화하려는 서비스 개발자 및 ML 엔지니어
의미 / 영향
이 사례는 특정 도메인 지식이 필요한 작업에서 LLM과 기존 메타데이터를 결합한 RAG 아키텍처가 얼마나 효과적인지 보여줍니다. 특히 Amazon Nova와 같은 최신 모델군과 스트리밍 API를 결합함으로써 대규모 B2C 서비스에서도 지연 시간과 비용 문제를 동시에 해결할 수 있음을 입증했습니다.
섹션별 상세


- Claude 3 Haiku 도입으로 긍정적인 사용자 피드백이 58%에서 71%로 13% 증가했다. — Generating title suggestions with Amazon Bedrock 섹션 마지막 문단

- Amazon Nova Pro는 73%의 긍정 피드백을 기록하며 테스트된 모델 중 가장 높은 만족도를 보였다. — Improving customer satisfaction and reducing cost with Amazon Nova 섹션

- ConverseStream API로 전환하여 TTFS를 1.41초에서 0.92초로 35% 단축했다. — Reducing Time to First Suggestion with the ConverseStream API 섹션
용어 해설
- Retrieval-based Few-shot Prompting
- — 데이터베이스에서 현재 입력과 유사한 사례를 검색하여 프롬프트의 예시(few-shot)로 제공하는 기법이다. 모델이 특정 도메인의 스타일이나 규칙을 더 잘 모방하도록 유도하며, Popsa 사례에서는 과거의 성공적인 제목 사례를 참고해 일관된 브랜드 톤을 유지하는 데 사용됐다.
- TTFS
- — 사용자의 요청 후 첫 번째 유효한 결과물이 화면에 나타날 때까지 걸리는 시간을 의미한다. 전체 응답이 완료되기 전이라도 사용자에게 즉각적인 피드백을 제공함으로써 서비스의 체감 속도와 반응성을 높이는 핵심 성능 지표(KPI)로 활용된다.
- Reverse Geocoding
- — 위도와 경도 좌표를 사람이 읽을 수 있는 주소나 지명(예: 프랑스 알프스)으로 변환하는 프로세스이다. 사진 메타데이터의 위치 정보를 텍스트 설명으로 변환하여 LLM이 맥락에 맞는 제목을 생성할 수 있도록 기초 데이터를 제공하는 역할을 한다.
AI 요약 · 북마크 · 개인 피드 설정 — 무료
출처 · 인용 안내
인용 시 "요약 출처: AI Trends (aitrends.kr)"를 표기하고, 사실 확인은 원문 보기 기준으로 진행해 주세요. 자세한 기준은 운영 정책을 참고해 주세요.