본문으로 건너뛰기
AI Trends
피드
트렌딩
커뮤니티
탐색
보관함
로그인
홈
트렌딩
커뮤니티
보관함
프로필
queue-style KV caching
큐 스타일 KV 캐싱
긴 시퀀스에서도 메모리 사용을 경계하는 큐 구조의 KV 캐시로, 낡은 토큰을 주기적으로 제거하여 O(Q) 메모리 및 연산 복잡도를 유지한다.
비슷한 개념
kv-cache
kv-cache-optimization
kv-compaction
hierarchical-temporal-memory
paged-kv-cache
kv-cache-attention
shared-kv-cache
kv-cache-quantization
← 용어 사전 전체 보기