Opus 4.6 좀 그만 올려치기 해라
Stop romanticizing Opus 4.6
핵심 요약
Opus 4.6이 최신 모델보다 뛰어나다는 환상에서 벗어나야 한다는 내용.
- 성능 비교 — Opus 5가 4.6보다 훨씬 똑똑하고 통찰력 있는 결과물을 제공함.
- 기억의 왜곡 — 4.6이 더 나았다고 생각한 건 착각이었으며 최신 모델이 확실히 진보함.
- 작업 효율성 — 프로파일링 트레이스 분석 시 4.6은 매우 멍청한 반응을 보임.
- 모델 발전 — 4.6 이후 모델들이 훨씬 더 유용하고 깊이 있는 분석이 가능함.
어제 opus5 점검 중에 작업(학습/추론 성능 엔지니어링, 커널 레벨 디버깅)을 계속하려고 opus 4.6으로 잠깐 바꿨음.
프로파일링 트레이스 분석하고 통찰을 얻으려고 똑같은 컨텍스트랑 프롬프트를 넣었는데, 믿을 수 없을 정도로 멍청해서 새 세션으로 다시 시도했는데도 결과가 개판이었음...
opus5 돌아오고 나서 다시 해봤는데, 차원이 달랐음... 훨씬 장황하긴 하지만 실제로 유용하고 통찰력 있는 결과물이 나옴.
4.6 이후로 opus 모델들이 얼마나 발전했는지 새삼 깨달음... 4.7 이후 모델들보다 4.6이 훨씬 똑똑하고 간결하다고 기억하고 있었는데, 다 헛된 망상이었음...


