Opus 5는 사실상 사용 불가능한 모델이다
Opus 5 is a practically unusable model
핵심 요약
사용자들은 Opus 5가 이전 모델보다 퇴보했으며, 지시사항을 무시하고 무한 루프에 빠지는 등 성능 저하가 심각하다고 비판합니다.
- 성능 퇴보 — 이전 모델인 Opus 4.8보다 지시사항 이행 능력이 현저히 떨어짐
- 무한 루프 — 문제를 해결하는 대신 새로운 문제를 계속 만들어내며 토큰을 낭비함
- 맥락 망각 — 비교적 작은 컨텍스트 윈도우에서도 지시사항과 이전 내용을 잊어버림
- 근거 없는 자신감 — 틀린 답을 내놓으면서도 매우 확신에 찬 태도를 보임
Opus 5를 약 1.5주 동안 사용해 봤는데, 모델이 저지르는 실수의 수가 정말 엄청나.
이 문제는 이전 Opus 모델들로도 했던 것처럼, 계획을 실행하는 전체 범위를 맡겼을 때 비로소 명확하게 드러났어. Opus 4.6~4.8은 확실히 훨씬 더 나았지.
Opus 5는 지시사항과 컨텍스트 내의 내용을 쉽게 잊어버리고, 실수를 저지르며, 본인이 깨닫거나 내가 지적하기 전까지는 계속해서 그 실수를 이어가.
내가 수정한 횟수는 이제 셀 수도 없을 정도야.
Opus 5의 이런 문제들은 컨텍스트 윈도우가 비교적 작을 때(100~150K 토큰 정도)도 발생해. Opus 4.8은 350K까지는 꽤 잘 작동하다가 그 이후에야 이상한 결과를 내놓거든.
지금 Claude Code에서 사용할 수 있는 모델은 Fable 5뿐인데, 벌써 주간 할당량을 100% 다 써버렸어.


