- SWE-bench는 AI 모델의 코딩 능력을 평가하는 벤치마크로, 실제 GitHub 이슈 해결 능력을 측정합니다. 🛠️
- 2294개의 실제 GitHub 이슈를 사용하여 12개의 인기있는 오픈 소스 Python 프로젝트에서 문제를 해결합니다. 🐍
- 모델은 이슈를 읽고, 프로젝트 파일을 분석하고, 문제를 해결하고, 테스트를 통과해야 합니다. 🧐
- SWE-bench verified는 더 명확한 설명과 신뢰할 수 있는 테스트를 가진 500개의 고품질 이슈로 구성됩니다. ✅
- 리더보드에서 Opus가 1위를 차지하고, GPT-4, Solar 순입니다. 🥇
- SWE-bench verified에서도 Opus가 선두를 달리고 있습니다. 🚀
- 더 많은 AI 콘텐츠를 보려면 BetterStack을 팔로우하세요. 👍
Recommanded Videos
Deno 2.0 vs Bun: Which Should You Choose?
2024. 12. 14.
Dart Practice 아홉 번째 - condition연습문제 10개
2023. 4. 13.
How I'd Learn ML/AI FAST If I Had to Start Over
2025. 4. 28.
Hotwire Spark makes rails BETTER!
2025. 1. 16.
NEW Sitebrew.AI Coding Agent🤖v0 Bolt.new Lovable.dev Alternative?? AI React Components & Sites
2025. 2. 6.
Introducing CustUp
2024. 3. 2.