Gemini 3 (FINAL Checkpoints Tested): I TESTED EVERY CHECKPOINT of Gemini-3. It's dropping this month
- Gemini 3.0 Pro가 이번 달 출시될 것으로 예상되며, Vertex AI에 잠시 목록이 노출되었다가 삭제되어 출시가 임박했음을 시사합니다. 🚀
- 초기 테스트된 2HTT 체크포인트는 탁월한 성능을 보였으며, 공간 추론, 3D 장면 생성, 복잡한 질문 해결에서 Sonnet 4.5 대비 약 25% 향상된 결과를 기록하며 리더보드 1위를 차지했습니다. 🧠
- 이후 등장한 ECPT 체크포인트는 성능이 저하된 "너프" 버전으로 느껴졌으며, 초기 2HTT의 인상적인 수준에는 미치지 못했으나 여전히 Sonnet보다는 우수했습니다. 📉
- 가장 강력한 X28 체크포인트는 2HTT보다 5~10% 더 개선된 성능을 보여주며, 일관성 있는 레이아웃, 뛰어난 시각적 품질, 복잡한 시뮬레이션 및 UI 생성 능력을 입증했습니다. ✨
- 강력한 체크포인트들은 "생각하는 변형"처럼 느껴지며, 느린 첫 토큰과 꾸준한 출력으로 깊은 추론 과정을 암시하고, 재생성 간 일관성이 매우 뛰어납니다. 💡
- UI 및 시각적 취향이 뛰어나 디자이너처럼 폰트와 레이아웃을 선택하며, 일반적인 "바이브 코드" 느낌이 적어 차별화된 결과물을 제공합니다. 🎨
- 도구 호출(Tool Calling)의 신뢰성이 핵심 성공 요인으로, 모델이 여러 함수 호출을 안정적으로 연결하여 라이브 에이전트에서 작동하는 능력이 중요합니다. 🛠️
- 가격은 Sonnet 수준이라면 성능이 정당화되지만, 더 높다면 도구 호출 신뢰성, 처리량, 일관성으로 이를 입증해야 할 것이며, Sonnet보다 낮다면 많은 사용자를 유치할 것입니다. 💰
- 최고의 Gemini 3 체크포인트는 생성형 코드에서 Opus와 동등하거나 그 이상, 공간 추론 및 3D 장면에서 Sonnet 4.5를 능가하며, 수학 및 일관성에서 GPT5와 경쟁할 수 있는 수준입니다. 🏆
- 출시될 버전이 X28 또는 2HTT에 가깝다면 "새로운 3.5 Sonnet 순간"이 될 것이지만, ECPT에 가깝다면 여전히 좋지만 기대했던 큰 도약은 아닐 것입니다. ⚖️
- 벤치마킹 시 웹 OS 스타일 데모 대신 3D, 수학, 다중 파일 도구 흐름 등 복잡한 작업을 통해 모델의 실제 역량을 평가하고, 응답 안정성 및 일관성을 확인해야 합니다. 📊
데브허브 | DEVHUB | Gemini 3 (FINAL Checkpoints Tested): I TESTED EVERY CHECKPOINT of Gemini-3. It's dropping this month