본문으로 건너뛰기

API Cost Optimization

API 비용 최적화

LLM 서비스를 이용할 때 발생하는 비용을 줄이기 위한 전략이다. 작업의 난이도에 따라 모델을 구분하여 사용하거나, 프롬프트를 효율적으로 작성하여 불필요한 토큰 소모를 방지하는 기법을 포함한다.