Kimi K3.1 Pro, AI 벤치마크에서 GPT-6 Sol, Astra, Claude Fable 5.1을 제치다 🚀

이번 건은 아님

응, 유튜브에서 아레나 영상 봤는데 나한테는 별로 안 좋아 보이더라

뭐, Sonnet이 Fable보다 나은 건 맞는데, 그렇다고 Sonnet이 더 좋다고 주장하는 사람은 아무도 없지.

내 사용 사례에서는 Sonnet 5.5가 진짜 대박이었음.

지난번에 Kimi K3 벤치마크 믿었다가 완전히 실망했음. 주는 작업마다 무식하게 힘으로 밀어붙이려고만 하고, 가격도 Opus 5.5나 Sol 6.1보다 싼 것도 아님. 게다가 마지막으로 확인했을 때 토큰을 물 마시듯이 태워버리던데

"Astra보다 높은 지능인데 가격은 64% 수준"

AA의 세 가지 테스트(Terminal-Bench 4.0, SciCode, 일반 Intelligence Index)를 종합해 보면, API 가격 기준으로 Opus 5.5 Max보다 약간 성능이 떨어지면서 가격도 약간 저렴함. Vals가 테스트 결과 내놓기를 기다리는 중, 더 확실해지겠지.

문제는 Opus 5.5 Max를 써야 할 상황이 거의 없다는 거임. Opus 5.5 Med랑 비교할 만한 건 뭐가 있지? 이건 효율성, 가격, 그리고 속도까지 다 따져봐야 하는 문제임.