BLEU

뜻풀이

쉬운 AI 사전

1. [명사] (평가) 기계 번역 결과가 사람이 한 번역과 단어나 구절이 얼마나 겹치는지 세서 매긴 점수.

실무 AI 사전

1. [명사] (평가) 번역 모델을 빠르게 자동 평가할 때 쓴다. 뜻은 같지만 표현이 다른 번역은 낮게 나오고, 한국어처럼 어순과 어미 변화가 많은 언어에서는 점수가 낮게 나오기 쉬워 사람 평가와 함께 본다.

전문 AI 사전

1. [명사] (평가) 2002년 IBM 연구진이 제안했다. 보통 1~4그램 정밀도의 기하 평균에 짧은 번역을 벌하는 간결성 페널티(brevity penalty)를 곱해 계산한다. 토큰화 방식에 따라 점수가 달라져 sacreBLEU 같은 표준 구현을 쓰기를 권한다.

관용구/함께 쓰는 말

• BLEU 점수 - 번역 품질을 0에서 100(또는 0에서 1) 사이로 나타낸 자동 평가 점수.

쉬운 비유

모범 답안과 같은 단어를 얼마나 썼는지만 세어 채점하는 서술형 시험과 같다.

예문

• 새 번역 모델이 BLEU로는 2점 올랐지만 사람이 읽기엔 차이가 거의 없었다.
• 토크나이저가 달라 BLEU를 직접 비교할 수 없었다.

헷갈리는 용어 비교

ROUGE

BLEU는 생성문이 참조문과 얼마나 겹치는지 정밀도 중심으로 보고 주로 번역에 쓴다. ROUGE는 참조문의 내용을 얼마나 담았는지 재현율 중심으로 보고 주로 요약에 쓴다.

맞춤법/표기법

바른 표기

BLEU

주의할 표기

BLUE블뢰

원어

BLEU

다른 이름

블루, BLEU 점수, 블루 점수

참고

색깔 blue와 철자가 다르다. 읽을 때는 '블루'.

관련어