[AI_TOP_100] 문제 출제 후기 – 기술이 아닌, 사람을 묻다.

AI 시대의 '문제 해결자' 탐색

• AI_TOP_100은 단순히 AI 도구 사용을 넘어, 복잡한 현실 문제를 AI와 협업하여 해결하는 인간의 역량을 측정하고자 함.
• 문제 정의부터 최적의 의사결정까지, 사람이 주도권을 잡고 AI를 효과적으로 활용하는 과정을 평가하는 데 중점.

문제 출제 원칙 및 설계

• 인간-AI 협업 루프(Human-in-the-loop): 사람의 분석 → AI의 문제 해결 → 사람의 검증 과정을 필수화.
• 낮은 진입 장벽, 높은 천장: '딸깍' 방지를 위해 AI의 기술적 약점을 문제에 심어 인간의 검증을 유도.
• 해법의 다양성: 창의적인 접근 방식을 장려하고, 참가자가 AI 활용의 의미 있는 발견을 하도록 설계.

치열한 검증 및 공정성 확보

• 4단계 파이프라인과 3단계 실증 테스트를 통해 문제 고도화 및 AI 모델 변화에 대응.
• 난이도 사다리 (다문항 구조)와 데이터셋 개인화로 공정성을 확보하고 변별력을 높임.
• Gemini 3 출시에도 본선 킬러 문항은 인간의 분석과 검증이 필수적임을 확인하며 설계 원칙의 유효성을 입증.