청크 중첩

지정된 소스 문서(raw/5단계 난이도로 알아보는 RAG 시스템 구축 및 구현 가이드.md)를 분석하여 개념 노트 청크 중첩.md 작성을 마쳤습니다.

📝 생성된 위키 노트 요약

• 파일명: llm-wiki/wiki/청크 중첩.md
• 유형: concept
• 핵심 주요 내용:
  • 문맥 단절 방지: 청크 경계에 문장이 잘려 결론이나 조건이 분리되는 경계 문제(Boundary Problem) 해결
  • 검색 실패율 개선: 스마트 청킹 및 중첩(Overlap) 기법 적용으로 Naive RAG 대비 검색 실패의 약 40% 해결 (raw/5단계 난이도로 알아보는 RAG 시스템 구축 및 구현 가이드.md)
  • 권장 스위트 스팟: 300~500 토큰 크기에 100 토큰 중첩 적용 (raw/5단계 난이도로 알아보는 RAG 시스템 구축 및 구현 가이드.md)
  • 구현 예시: LangChain의 RecursiveCharacterTextSplitter 파라미터 및 메타데이터 결합 코드 포함
• 연동 위키 링크: [[RAG]], [[Naive RAG]], [[프로덕션 RAG 가드레일]], [[AI 환각 현상]], [[LLM 아키텍처 Lost in the Middle 현상]]