kordoc RAG 청크 변환과 스캔 PDF OCR, 공문서를 검색 가능한 지식으로
사내 규정집 수백 쪽을 챗봇에 연결했는데, 사용자가 “문서 폐기 대장은 몇 년 보관하나요”라고 물으면 엉뚱한 조항을 가져옵니다. RAG를 만들어 보신 분이라면 한 번쯤 겪는 일입니다. 원인은 모델이 아니라 문서를 자르는 방식인 경우가 많습니다. 글자 수로 뚝뚝 자르면 “제4조 폐기 절차”라는 제목은 이전 청크에 남고 본문만 다음 청크로 넘어가 버리거든요. 이 글은 kordoc 입문 시리즈의 마지막 … Read more