AI 기초 및 활용 19회: LLM은 어떻게 길러지는가 — 아는 것과 처신하는 것은 다른 문제입니다
사전학습만 끝낸 모델은 질문에 답하지 않고 질문을 더 만들어 냅니다. 지시 미세조정과 인간 피드백 강화학습이 그 날것을 어떻게 대화 상대로 바꾸는지, 그리고 그 과정에서 정렬세와 아첨이 왜 필연적으로 따라오는지를 다룹니다.
사전학습만 끝낸 모델은 질문에 답하지 않고 질문을 더 만들어 냅니다. 지시 미세조정과 인간 피드백 강화학습이 그 날것을 어떻게 대화 상대로 바꾸는지, 그리고 그 과정에서 정렬세와 아첨이 왜 필연적으로 따라오는지를 다룹니다.