RAG (Retrieval Augmented Generation) 심층 분석

RAG (Retrieval Augmented Generation) 심층 분석: LLM의 한계를 넘어서는 지식 확장 기술의 핵심과 고급 전략1. RAG 파이프라인의 핵심 구성 요소 및 최적화 (Where to Retrieve?)RAG 시스템의 근간은 LLM이 참조할 수 있는 고품질의 외부 지식 기반을 효율적으로 구축하고 활용하는 것입니다. 이 과정은 데이터 수집부터 벡터화, 그리고 검색에 이르기까지 정교한 설계와 최적화가 필수적입니다.로드 (Load):다양한 데이터 소스 수집: RAG는 PDF, JSON, HTML, Markdown, CSV 등 다양한 정적 문서 형식은 물론, GitHub, Notion, Slack, Google Drive와 같은 클라우드 기반 서비스, 그리고 다양한 관계형/NoSQL 데이..