골든 데이터셋

뜻풀이

쉬운 AI 사전

1. [명사] (평가) 사람이 꼼꼼히 확인해 둔 정답 모음. AI가 잘하는지 재볼 때 기준으로 쓴다.

실무 AI 사전

1. [명사] (평가) 서비스에서 실제로 나올 법한 질문과 검수된 정답을 100~수백 건 모아 두고, 프롬프트나 모델을 바꿀 때마다 같은 문제로 다시 채점한다. 새로 발견한 실패 사례를 계속 보태 가며 키운다.

전문 AI 사전

1. [명사] (평가) 평가용으로 전문가가 라벨링하고 합의를 거친 소규모 고품질 참조 데이터. 학습 데이터와 분리해 유출을 막아야 하며, 대표성과 난이도 분포, 라벨 일치도(예: 평가자 간 합의)가 평가의 신뢰도를 정한다.

관용구/함께 쓰는 말

• 골든셋 회귀 테스트 - 기존 정답 모음으로 바뀐 버전이 이전보다 나빠지지 않았는지 확인하는 일.

쉬운 비유

정답지가 붙은 모의고사 문제집과 같다. 같은 문제집으로 매번 풀어 봐야 실력이 늘었는지 알 수 있다.

예문

• 프롬프트를 고칠 때마다 골든 데이터셋 200건을 돌려 점수가 떨어지지 않았는지 확인한다.
• 고객 불만 사례를 골든셋에 추가했더니 지난 버전의 약점이 바로 드러났다.

헷갈리는 용어 비교

학습 데이터

학습 데이터는 모델이 배우는 데 쓰고, 골든 데이터셋은 배운 뒤 재는 데만 쓴다. 둘이 섞이면 점수가 부풀려진다.

벤치마크

벤치마크는 공개되어 여러 모델이 함께 쓰는 시험이고, 골든 데이터셋은 우리 서비스에 맞춰 직접 만든 비공개 시험이다.

맞춤법/표기법

바른 표기

골든 데이터셋

주의할 표기

골든데이터셋

원어

golden dataset

다른 이름

골든셋, 골든 셋, 정답 데이터셋, golden set

참고

'골든셋'으로 줄여 쓰는 일이 많다.

관련어