인스트럭션 튜닝

뜻풀이

쉬운 AI 사전

1. [명사] (학습) AI가 사람의 지시를 알아듣고 따르도록 '지시와 모범 답'을 묶은 자료로 한 번 더 가르치는 과정.

실무 AI 사전

1. [명사] (학습) 사전 학습만 한 모델은 글을 이어 쓰기만 해서 질문에 엉뚱하게 답한다. 지시문과 정답 응답 쌍으로 추가 학습하면 챗봇처럼 요청을 수행하게 되며, 업무 형식이나 말투에 맞춘 사내 모델을 만들 때 쓴다.

전문 AI 사전

1. [명사] (학습) 다양한 과제를 자연어 지시와 응답 쌍으로 구성한 데이터로 지도 학습 방식의 미세 조정을 하는 기법. 지시의 다양성과 응답 품질이 일반화 성능을 좌우하며, 이후 선호 기반 정렬 단계(RLHF, DPO)의 출발점이 된다.

관용구/함께 쓰는 말

• 인스트럭션 데이터 - 지시와 응답이 짝을 이룬 학습 자료.
• 지시 따르기 - 사용자의 요청을 정확히 수행하는 능력.

쉬운 비유

운전 이론만 외운 사람에게 '손님이 이렇게 말하면 이렇게 모셔라'라는 모범 대화집을 주고 연습시키는 것과 같다.

예문

• 사전 학습만 끝난 모델은 질문을 던져도 질문을 이어 쓰기만 했는데, 인스트럭션 튜닝 뒤에는 답을 하기 시작했다.
• 우리 회사 보고서 양식으로 인스트럭션 튜닝 데이터 3000건을 만들어 모델을 맞췄다.
• 데이터 품질이 낮으면 인스트럭션 튜닝이 오히려 모델 성능을 해친다.

헷갈리는 용어 비교

SFT

인스트럭션 튜닝은 지시를 따르게 하려는 목적을 말하고, SFT는 정답 데이터로 지도 학습하는 방법 이름이다. 인스트럭션 튜닝은 대개 SFT로 하기 때문에 거의 같은 뜻으로 쓰이기도 한다.

파인튜닝

파인튜닝은 모델에 추가 학습을 시키는 모든 일을 가리키는 넓은 말이고, 인스트럭션 튜닝은 그중 지시 따르기를 가르치는 한 종류다.

맞춤법/표기법

바른 표기

인스트럭션 튜닝

주의할 표기

인스트럭션튜닝인스트럭션 파인튜닝

원어

instruction tuning

다른 이름

지시 튜닝, 명령어 튜닝, instruction fine-tuning, 지시문 미세 조정

참고

'인스트럭션'은 instruction의 표기. 번역어는 '지시 튜닝'이다.

관련어