자기 지도 학습
self-supervised learning전문다른 이름: 자기지도학습, Self-supervised Learning, SSL, 자가 지도 학습, 셀프 슈퍼바이즈드 러닝
뜻풀이
쉬운 AI 사전
- [명사] (학습) 사람이 정답을 붙여 주지 않아도, 데이터 안에서 스스로 문제와 정답을 만들어 배우는 방법. 문장 일부를 가리고 맞히는 식이다.
실무 AI 사전
- [명사] (학습) 라벨 비용이 크기 때문에 대규모 사전 학습에서 널리 쓴다. 이렇게 먼저 배운 모델을 적은 라벨로 파인튜닝하면 성능이 높아진다.
전문 AI 사전
- [명사] (학습) 입력 자체에서 지도 신호를 만드는 사전 과제(pretext task)로 표현을 학습한다. 언어 모델의 다음 토큰 예측과 마스크 언어 모델, 비전의 대조 학습이나 마스크 이미지 복원이 대표적이다. 비지도와 지도 학습의 중간 성격을 가진다.
관용구/함께 쓰는 말
- 사전 과제 - 정답이 자동으로 생기도록 만든 학습용 가짜 문제.
- 대조 학습 - 같은 것은 가깝게, 다른 것은 멀게 표현을 학습하는 방식.
쉬운 비유
국어책의 문장에서 단어 하나를 가리고 빈칸을 채우는 연습과 같다. 선생님이 문제를 내 주지 않아도 책 한 권으로 스스로 문제를 만들어 푼다.
예문
- 문장의 다음 단어를 맞히는 자기 지도 학습으로 라벨 없이 수조 개의 문서를 학습했다.
- 자기 지도 학습으로 먼저 이미지 표현을 익힌 뒤, 라벨이 적은 분류 작업에 파인튜닝했다.
- 자기 지도 학습 덕분에 사람이 일일이 라벨을 달 필요가 크게 줄었다.
헷갈리는 용어 비교
- 지도 학습
- 지도 학습은 사람이 붙인 정답이 필요하고, 자기 지도 학습은 데이터 자체에서 정답을 만들어 쓴다. 그래서 훨씬 많은 데이터를 쓸 수 있다.
- 비지도 학습
- 비지도 학습은 군집화처럼 구조를 찾는 데 목적이 있고, 자기 지도 학습은 숨긴 일부를 맞히는 예측 문제로 바꿔 표현을 배운다.
맞춤법/표기법
- 바른 표기
- 자기 지도 학습
- 원어
- self-supervised learning
- 다른 이름
- 자기지도학습, Self-supervised Learning, SSL, 자가 지도 학습, 셀프 슈퍼바이즈드 러닝
- 참고
- '지도 학습'과 '비지도 학습' 사이에 놓이는 개념이며 '자기 지도'로 붙여 쓰기도 한다.