r/Anthropic•2개월 전•78•45
Opus 5의 무한 루프
The Opus 5 loop
핵심 요약
Opus 5가 실수를 깨닫고 수정하는 과정을 반복하며 이전 모델보다 퇴보한 듯한 모습을 보인다는 비판입니다.
- Opus 5의 루프 현상 — 실수를 인지하고 수정 계획을 세우지만 다시 오류를 범하는 무한 루프에 빠짐
- 모델 성능 퇴보 — Opus 4.8에서 보여준 비약적인 품질 향상이 이번 버전에서는 느껴지지 않음
- 지능적 한계 — 모델 자체는 똑똑하지만 지나치게 성급하거나 맥락 파악이 부족해 실수를 반복함
“이런. 지난 10분 동안 작업한 모든 게 완전히 틀린 것으로 밝혀졌네. 모순되는 내용을 발견했어. 이제 올바른 계획을 다시 짜야겠어.”
10분 후:
“이런. 지난 10분 동안 작업한 모든 것, 그리고 그전 10분 동안 작업했던 모든 것이 틀린 내용에 기반하고 있었네. 이제 최종 계획을 다시 짜야겠어.”
이런 식임.
이런 작업 방식이 Opus 5의 가장 큰 문제점을 가장 잘 보여준다고 생각함. 솔직히 이 점에 있어서는 퇴보한 느낌임. 모델이 확실히 매우 똑똑하다는 건 부정하지 않음. 하지만 왜 그런지 완전히 이해할 수는 없지만, 너무 의욕이 앞서서인지, 고려해야 할 요소를 충분히 반영하지 않아서인지, 아니면 결정적인 순간에 지식이 제한적이어서인지, 결국 실수를 저지르고 그걸 깨닫는 방식이 Opus 4.8 이전 모델들과 놀라울 정도로 비슷함.
Opus 4.8에서 보았던 품질의 도약은 적어도 이 부분에 있어서는 사라진 것 같음.
