Claude 5가 4.8보다 더 엉망임

벤치마크 점수는 Fable보다도 높게 나오는데 왜 실사용은 이렇게 별로인지 이해가 안 감. 그리고 맞음, 진짜 누가 계속 감시해야 함. 난 Fable이 사양 쓰고 조율하게 하고, Sol이 하는 모든 걸 검토하면서 사양대로 했는지 확인하게 함.

학교들이 어떻게 순위 상위권을 유지하겠냐? 학생이랑 교직원들한테 시험 대비를 시키는 거지. 벤치마크 통과하는 게 특정 사용 사례를 다 설명할 수는 없는 법이다.

동의함. 설계랑 조율하는 능력이 최악임. 보통 최상위 Fable 코디네이터가 조율하게 하는데, 세이프가드 걸려서 Opus 5로 돌아간 걸 눈치 못 챘음. 진짜 경악할 정도로 별로였음. 있지도 않은 무작위 문제나 함정을 스스로 만들어내고, 그걸 해결하려고 끙끙대다 실패함. 그러면서 내 생각엔 자기 무능함을 감추려고 장황하게 어려운 단어만 늘어놓는 것 같았음.

나도 비슷한 이유로 당분간은 4.8 쓸 거임. 진짜 짜증 나는 건 Opus 5는 (High thinking 모드에서도) 새로 시작한 채팅에서 뭘 해야 할지 아주 명확하게 알려줘도 항상 지름길만 찾으려 함... 심지어 분석할 코드 10줄을 주고(그다음 계획 단계까지 알려줘도) 첫 2줄만 보고는 섣불리 단정 짓고 범위랑 상관없는 철학적인 소리나 늘어놓음.

Opus 5는 수준 이하임. 솔직히 최근 몇 번의 Opus 릴리즈는 진짜 실망스러웠음.