지식·검색·안전 · Chunking중급갱신일 2026. 10. 1.
청킹
긴 문서를 RAG용으로 검색 가능한 작은 덩어리로 나누는 전처리입니다.
비유
두꺼운 책을 포스트잇 단위 단락으로 찢어 서랍에 넣는 것과 같습니다. 너무 잘게/크게 자르면 찾기 어렵습니다.
이렇게 이해하세요
청킹은 토큰 한도와 검색 품질을 위해 문서를 단락·섹션·고정 길이로 분할합니다. 겹침(overlap)·제목 보존이 중요합니다. 잘못된 청킹은 검색 누락·맥락 단절을 만듭니다. 표·코드는 특수 전략이 필요할 수 있습니다.
한 줄 암기
청킹 = 검색용 조각 내기
좋은 예
매뉴얼을 제목 단위로 나누고 인접 문단을 약간 겹친다.
피하기
PDF 전체를 한 청크로 넣어 검색이 항상 같은 덩어리만 나온다.
관련 서비스
관련 에이전트
관련 용어
지식·검색·안전 더보기관련 링크
자주 묻는 질문
이상적 크기는?
도메인마다 다르지만, 의미 단위가 유지되는 수백 토큰대가 출발점으로 흔합니다.
중복이 많으면?
오버랩을 줄이거나 중복 제거·리랭킹을 검토하세요.