Community

Pinecone 튜토리얼 - 한글 형태소 분석기+HybridSearch

VectorStore 에 대한 튜토리얼을 개편하면서, Pinecone 튜토리얼에 대하여 다루는 튜토리얼 영상을 제작하여 공유 드립니다. ✔️ 링크: https://youtu.be/kXPGWczk9ig ✅ 주요 내용: * Chrome, FAISS 튜토리얼 개편 안내 * Chroma 의 멀티모달 Embedding + 이미지 Retriever 예제 추가 * Pinecone 인덱스 생성, 문서 전처리, metadata 태깅 * 문서 내용 기반 Sparse Encoder 학습 후 이를 Retriever 시 활용 * Pinecone 의 Retriever 를 Kiwi 형태소 분석 + 학습된 Sparse Encoder 기반 Hybrid Search 를 가능케하는 PineconeKiwiHybridRetriever 소개 * 분산 처리 로직을 추가하여 대용량 문서의 Upsert 속도를 대폭 개선 * Retriever 로 동적 filter 기능 추가 (페이지 필터, 문서 지정 필터 등) langchain-teddynote 패키지에 신규 기능들을 추가해 놓았고, 앞으로도 신규 기능들을 추가해 나갈 예정입니다. 이에 영상으로 활용 방법을 공유 드리면, 더 많은 분들이 접근성 좋게 사용할 수 있을 것 같아 공유 드립니다. * Pinecone 은 무료 index 5개를 생성할 수 있습니다. 감사합니다. 즐거운 주말 되세요! #rag #vectorstore #pinecone

알림

알림이 없습니다