기록하고 기록하면 어떻게 될까

2023년 가장 핫한 토픽 중 하나인 chatGPT에 대해서 정리하는 페이지다. 너무나도 많은 변화를 가져오고 있어서 나 역시도 이를 잘 알아야 겠다는 생각이 들어 블로그에 정리하고자 한다. ChatGPT 란? 우선 chat GPT는 OpenAI가 개발한 일종의 인공지능 챗봇이다. 대형 언어 모델 GPT-3의 개선판인 GPT- 3.5를 기반으로 만들어졌으며 지도학습과 강화학습을 모두 사용하여 파인 튜닝되었다. chatGPT의 학습 과정을 좀 더 자세히 정리하면 지도학습의 경우, 인간 트레이너가 사용자와 chatGPT 양쪽 모두를 연기하는 대화가 모델에 입력되었다. 강화 학습에서는 인간 트레이너들이 먼저 모델이 이전 대화에서 만든 응답들에 순위를 매겼다. 이를 통해 보상 모델을 만들어 학습시켰다. 사실 앞..