[Advanced AI] RAG 시스템에서의 명사구 충돌 문제와 해결방안
AI
[Advanced AI] RAG 시스템에서의 명사구 충돌 문제와 해결방안
두줄요약
RAG 시스템의 환각 원인으로 명사구 충돌을 설명하고, 이를 줄이기 위한 전처리와 쿼리 분할 방안을 소개했습니다. 기업 문서 특성에 맞춘 데이터 사전처리로 정확도를 높일 수 있다고 정리했습니다.
핵심 내용
- RAG 시스템에서도 최신 LLM이 환각을 완전히 막지 못하는 한계
- 환각의 핵심 원인으로 의미적으로 유사한 명사구를 같은 개념으로 혼동하는 명사구 충돌 제시
- Acurai 논문을 바탕으로 쿼리 분할, 단순 문장 전송, 수정 텍스트 재매핑으로 혼동을 줄이는 접근 소개
적용해볼 점
- 기업 문서 구조와 사용자 요구에 맞춘 전처리·사전처리 설계 필요
- 유사 명사구가 많은 도메인에서 사실 집합 분리와 개념 재매핑 검토