PHpullh
학습 라이브러리/AI Knowledge/청킹(Chunking) 전략

AI KNOWLEDGE · RAG & 검색

청킹(Chunking) 전략

문서를 검색 가능한 크기로 자르는 방법. ①고정 크기(500~1000 토큰, 20% 오버랩) ②문장/단락 기준 ③재귀적 분할(헤더→섹션→단락) ④시맨틱 청킹(의미 변화 지점). 문서 유형에 따라 전략이 다릅니다.

RAG & 검색

핵심 설명

문서를 검색 가능한 크기로 자르는 방법. ①고정 크기(500~1000 토큰, 20% 오버랩) ②문장/단락 기준 ③재귀적 분할(헤더→섹션→단락) ④시맨틱 청킹(의미 변화 지점). 문서 유형에 따라 전략이 다릅니다.