청킹

뜻풀이

쉬운 AI 사전

1. 「명사」 『데이터』 긴 문서를 AI가 검색하기 좋게 적당한 크기의 조각(청크)으로 자르는 것.

전문 AI 사전

1. 「명사」 『데이터』 RAG 전처리에서 문서를 임베딩 단위로 분할하는 과정. 고정 길이, 문단, 제목 기준, 의미 기반 분할 등이 있으며 청크 크기와 겹침이 검색 품질을 좌우한다.

쉬운 비유

두꺼운 교과서를 찾아보기 쉽도록 단원별 포스트잇 카드로 쪼개는 것과 같다. 너무 크면 찾기 어렵고 너무 잘게 자르면 맥락이 끊긴다.

예문

• 청킹 크기를 500토큰으로 줄였더니 검색 정확도가 올랐다.
• 표가 청크 중간에서 잘리는 바람에 검색이 엉뚱한 답을 내서 청킹 기준을 제목 단위로 바꿨다.

헷갈리는 용어 비교

토큰

토큰은 AI가 글을 읽는 가장 작은 단위로, 모델 내부에서 자동으로 나뉜다. 청킹은 사람이 검색 목적에 맞춰 문서를 문단이나 수백 토큰 정도의 큰 덩어리로 나누는 작업이다.

임베딩

청킹은 문서를 조각으로 나누는 단계이고, 임베딩은 그 조각을 의미를 담은 숫자 벡터로 바꾸는 다음 단계다. 보통 청킹을 한 뒤에 각 청크를 임베딩해서 저장한다.

맞춤법/표기법

바른 표기

청킹

주의할 표기

청크화

원어

chunking

다른 이름

문서 분할, 청크

관련어

마지막 확인 2026-10-14
뜻풀이는 학습용 참고 자료입니다.