요약(Summary)

이제 Naive RAG 에서 다루는 튜토리얼은 거의 마무리가 되어 갑니다. 이번 공유 드릴 주제는 "요약(Summary)" 입니다. 요약이라는 Task 는 생각보다 좀 까다롭습니다. (물론 ChatGPT 문서 넣고 요약하면 잘 해주는데? 라고 생각하시지만...) Human vs GPT 요약 비교에서 더 '밀도' 있는 요약 점수에서 높은 점수를 받는 것은 생각보다 어렵습니다. 이번 튜토리얼에서는 1. 대표적인 요약 방식인 "Stuff", "Map-Reduce", "Map-Refine" 2. 밀도 높은 요약 결과물을 만들어 내는 것으로 알려진 Chain of Density 프롬프트를 적용한 요약 3. 그리고 마지막으로 SemanticChunker 의 제안자 이자, 클러스터링 기법을 활용한 요약의 제안자이기도 한 gkamradt 의 클러스터링 후 Map-Refine 요약도 다룹니다. 아래의 링크에서 확인하실 수 있습니다. 링크: https://wikidocs.net/234020 감사합니다. #summary #요약 #gpt