- Autoleg๋ ํ๊ตญ์ด ์๋ฒ ๋ฉ ๋ชจ๋ธ์ ๋ฒค์น๋งํฌํ๋ ๋ฐ ์ฌ์ฉํ ์ ์๋ ๋ ํ์งํ ๋ฆฌ๋ฅผ ์ ๊ณตํฉ๋๋ค. ๐งฐ
- UserRepository: Autoleg Apple Korean Bench ๋ฅผ ์ฐธ๊ณ ํ์ฌ ๋ ํฌ์งํ ๋ฆฌ๋ฅผ ์ ์ฅ์์์ ํด๋ก ํ์ฌ ๋ด๋ ค๋ฐ์ต๋๋ค. ๐
- API Key ํ์: Upstage, Cohere, An API Key๋ฅผ ํ๋ํ์ฌ emv ํ์ผ์ ๊ตฌ์ฑํด์ผ ํฉ๋๋ค. ๐
- CUDA ๊ถ์ฅ: ๋ฒค์น๋งํฌ ์คํ ์ ๋น ๋ฅธ ์ฑ๋ฅ์ ์ํด CUDA ๊ฐ์์ ์ง์ํ๋ ํ๊ฒฝ์ด ํ์ํฉ๋๋ค. โก๏ธ
- Bench Mark ๋ฉํธ๋ฆญ: 6๊ฐ์ง ๋ฉํธ๋ฆญ (ROUGE, BLEU, PLU, etc.)์ ์ฌ์ฉํ์ฌ ๋ค์ํ ์๋ฒ ๋ฉ ๋ชจ๋ธ์ ํ๊ฐํฉ๋๋ค. ๐
- ๋ฐ์ดํฐ์ : Naver Clova ๋ชจ๋ธ๋ก OCR์ ์ํํ์ฌ ์์ฑ๋ ํ๊ตญ์ด LegBenchmark ๋ฐ์ดํฐ์ ์ ์ฌ์ฉํฉ๋๋ค. ๐ฐ
- ์ง์์๋ต ํ์: ์ง๋ฌธ(query), ์์ฑ๋ ๋ต๋ณ(generation), ์ ๋ง ๋ฌธ์(retry) ํํ๋ก ๋ฐ์ดํฐ์ ๊ตฌ์กฐ๊ฐ ์ด๋ฃจ์ด์ ธ ์์ต๋๋ค. ๐ค