AI 용어사전 › 언어, 데이터

어간 추출

stemming전문

다른 이름: 스테밍

뜻풀이

쉬운 AI 사전

  1. [명사] (언어) 단어 끝에 붙은 꼬리를 잘라 기본 모양만 남기는 일. 영어의 running, runs를 run으로 맞춰 같은 단어로 세는 것이 예다.

실무 AI 사전

  1. [명사] (언어) 영어 문서 검색이나 키워드 통계에서 같은 뜻의 여러 변형을 하나로 묶어 검색 누락을 줄일 때 쓴다. 규칙으로 잘라 내므로 빠르지만 결과가 실제 단어가 아닐 때가 있다. 한국어는 활용이 복잡해 보통 형태소 분석으로 어간을 구한다.

전문 AI 사전

  1. [명사] (언어) 접미사 제거 규칙으로 단어를 어간(stem)으로 정규화하는 기법. Porter, Snowball 알고리즘이 대표적이며, 사전 없이 동작해 과잉 절단(over-stemming)과 과소 절단 오류가 생긴다. 사전과 품사 정보로 실제 기본형을 찾는 표제어 추출(lemmatization)과 대비된다.

관용구/함께 쓰는 말

  • 포터 스테머 - 영어 어간 추출에 가장 널리 쓰이는 규칙 기반 알고리즘.

쉬운 비유

예문

  • 영문 논문 검색에 어간 추출을 켜니 'learning'으로 찾아도 'learned'가 들어간 논문이 함께 나왔다.
  • 어간 추출로 'university'와 'universe'가 같은 어간이 돼 검색 결과가 엉뚱하게 섞였다.

헷갈리는 용어 비교

표제어 추출
어간 추출은 규칙대로 꼬리를 잘라 'studi'처럼 사전에 없는 모양이 나올 수 있다. 표제어 추출은 사전과 품사를 보고 'study'처럼 실제 기본형을 찾아 더 정확하지만 느리다.
형태소 분석
어간 추출은 단어 하나의 꼬리만 다루고, 형태소 분석은 문장을 형태소로 나누고 품사까지 붙인다. 한국어 처리에서는 형태소 분석이 어간 추출 역할을 함께 한다.

맞춤법/표기법

바른 표기
어간 추출
주의할 표기
어근 추출어간추출기
원어
stemming
다른 이름
스테밍
참고
어간과 어근은 다른 개념이므로 '어근 추출'로 쓰지 않는다.

관련어