checklist

체크리스트 — Few-shot & 형식 강제

Few-shot 설계

• 예시 개수가 작업 유형에 적절한가 (분류 612, 톤 23, 추출 1~3)
• 클래스/패턴 분포가 균형 잡혀 있는가
• 에지 케이스(빈 입력, 모호, 악성, 다국어) 1개 이상
• 마지막 예시가 의도된 편향을 만들지 않는가
• 예시가 시스템 층에 있어 캐시 가능한가

형식 강제

• 스키마(필드·타입·enum·길이) 명시
• “지정 형식 외 텍스트 금지” 문구 포함
• 가능하면 assistant prefill로 시작 토큰 강제
• 다음 단계가 코드라면 tool use 검토
• 파싱 실패 시 재시도 루프가 있는가

평가

• 정확도 + 형식 적합률(parse rate)을 별도로 측정하는가
• Few-shot 예시 변경 시 회귀 세트로 영향을 확인하는가