Cognition, AI 코딩 에이전트를 위한 더 엄격한 벤치마크 'FrontierCode 2.0' 출시. 결과는 처참함: Claude Opus 5.5가 45.5%로 1위, GPT-6 Astra가 42.8%로 그 뒤를 이음.
Cognition has released FrontierCode 2.0, a tougher benchmark for Al coding agents. The results are brutal: Claude Opus 5.5 leads with just 45.5%, followed by GPT-6 Astra at 42.8%.
핵심 요약
새로운 코딩 벤치마크 FrontierCode 2.0이 공개되면서 기존 모델들의 성능과 효율성에 대한 논쟁이 이어지고 있습니다.
- 벤치마크 신뢰성 — 기존 벤치마크보다 실무 코딩 능력을 더 잘 평가한다는 평가가 지배적임
- 모델 성능 격차 — Claude와 GPT가 상위권을 차지한 반면, Muse와 Argon 등은 기대 이하의 성적을 기록함
- 비용 효율성 논쟁 — API 비용과 실제 구독 모델의 효율성 차이를 두고 사용자들 간 의견이 갈림
- 평가 대상 누락 — DeepSeek 등 일부 모델이 벤치마크 결과에서 제외되거나 제대로 표시되지 않아 아쉬움을 삼

