post-training사후 학습

post-training은 대량의 데이터로 기본 능력을 기르는 pretraining 뒤에 이어지는 학습 단계를 통틀어 이르는 말이다. 지시 따르기, 대화 방식, 추론 능력, 안전한 응답 같은 모델의 행동을 원하는 방향으로 다듬는다.

지도 학습 방식의 fine-tuning, 사람의 선호를 반영하는 강화학습, 추론 능력을 높이는 강화학습 등이 쓰인다. 같은 기본 모델에서 여러 용도의 모델을 만드는 데에도 활용된다.

이 설명은 AIPOST 기사와 널리 알려진 사실을 바탕으로 정리했습니다. 잘못된 내용이 있으면 정정 요청으로 알려 주세요.