- 문서 로딩은 Lang Chain의 Document Loader를 활용하여 간편하게 진행한다. 📚
- 문서 분할은 トークン 기반으로 Recursive Character Text Splitter를 사용하여 효율성을 높인다. ✂️
- 한글 문서를 처리하기 위해 Hugging Face에서 제공하는 한글 특화된 Embedding Model을 활용한다. 🇰🇷
- 벡터 저장은 유저 인터페이스가 쉽고 빠른 반응 속도 제공 가능한 🤗 Hugging Face를 선택하여 온라인으로 진행한다. ⚡️
- 문답 (QA) 생성에는 GPT-4와 같은 고성능 LLM을 사용하여 정확도를 높인다. 🧠
- 하기 쉬운 웹 UI 개발은 Streamlit을 사용하여 빠르고 효율적으로 구축하고 배포한다. 💫
Recommanded Videos
