OpenAI o1 is Better Than I Expected

오픈AI 01은 기대보다 뛰어나다는 주장으로 진행됨. 👍

저자는 이전에 발표된 언어 모델의 과장된 예측에 대한 경험에서 시작하며 01의 실제 능력을 객관적으로 평가하려는 입장임. 🤔

01은 코드포스 컴퓨터 프로그래밍 문제에서 89퍼센타일을 기록하며, 미국 오리마임가에서 top 500 학생 수준의 수학 올림피아드 실력을 보인다고 한다. 🧮

01은 파이 피학 문제에서 대학원 수준의 능력을 보이며, 경쟁력 있는 성과를 기록했다. 🧬

01은 GPT 4.0보다 우수한 성능을 보여냈지만, 질문에 답하는 데 더 많은 시간이 걸린다는 단점이 있음. 🐢

오픈AI는 01 모델을 코테포 포스 시합용으로 사용한 실험결과를 발표했으며, 1,800 Elo점을 기록하는 등 우수한 성능을 보냈다고 주장한다. 🏆