실용적 조언
- DeepSeek API 사용 시 prefix=True 파라미터를 활용하여 모델의 첫 번째 출력 토큰을 강제하라
- 코드 생성 작업 시 프리필에 언어 식별자(예: python)를 넣고 stop sequence를 설정하여 순수 코드만 추출하라
섹션별 상세
용어 해설
- 프리필(Prefill)
- — LLM API 호출 시 어시스턴트의 응답 시작 부분을 사용자가 미리 정의하는 기술이다. 모델이 답변의 첫 토큰을 생성하는 과정을 생략하고 지정된 텍스트 뒤를 이어 쓰게 함으로써 출력 형식을 강제하거나 불필요한 서론을 제거하는 데 사용된다.
- 구조화된 출력(Structured Output)
- — LLM이 생성하는 텍스트를 JSON이나 특정 코드 블록 형태 등 미리 정의된 규격에 맞게 출력하는 방식이다. 에이전트 시스템에서 모델의 응답을 파싱하여 다음 단계의 입력으로 사용할 때 필수적인 기술이다.
- 중단 시퀀스(Stop Sequences)
- — 모델이 텍스트를 생성하다가 특정 문자열을 만나면 즉시 생성을 멈추도록 설정하는 파라미터이다. 프리필과 결합하여 코드 블록의 닫는 태그나 특정 구분자에서 생성을 종료시켜 출력의 범위를 정밀하게 제어한다.
언급된 도구
프리필 기능을 지원하는 LLM 추론 인터페이스
언급된 리소스
AI 요약 · 북마크 · 개인 피드 설정 — 무료
출처 · 인용 안내
인용 시 "요약 출처: AI Trends (aitrends.kr)"를 표기하고, 사실 확인은 원문 보기 기준으로 진행해 주세요. 자세한 기준은 운영 정책을 참고해 주세요.