4.8 버전이 4.7보다 확실히 훨씬 낫네
4.8 actually feels much better than 4.7
핵심 요약
사용자들이 4.7 버전의 성능 저하를 겪은 후, 4.8 버전이 4.6 수준의 성능을 회복하며 훨씬 개선되었다고 평가함.
- 성능 개선 — 4.7의 게으른 동작과 오류가 4.8에서 크게 개선됨
- 버전 비교 — 4.8이 4.6의 성능 수준을 회복했다는 의견이 지배적임
- 사용자 경험 — 계획 수립 및 복잡한 설계 문제 해결 능력이 향상됨
- 일부 이슈 — 모델 자체의 문제는 아니지만 여전히 하네스 관련 오류는 존재함
여기서 논의된 하네스(harness) 이슈는 차치하고라도, 4.8이 4.7보다 크게 개선되었다고 느낀다.
나는 약 1년 전부터 Claude 3.5를 사용해왔다. 4.6(초기 버전)이 확실히 성능의 정점이었다.
4.7은 정말 짜증 났다. 문제투성이였거든. 전반적으로 게을렀고, 파일을 제대로 읽거나 검증하는 대신 지레짐작해서 멍청한 실수를 저질렀다. 20줄 정도밖에 안 되는 파일을 아예 읽지 않기로 결정해서 기능을 완전히 망가뜨렸던 일을 절대 잊을 수 없다. 게으름의 극치였다.
4.8은 4.6과 훨씬 비슷하게 느껴진다. 4.6만큼 좋은지 아니면 그냥 비슷한 수준인지는 단언할 수 없지만, 전반적으로 만족스럽다. 물론 발생하면 짜증 나는 하네스 이슈는 제외하고 말이다. 하지만 그건 모델의 문제는 아니니까.
물론 이건 내 개인적인 의견이자 경험일 뿐이다. 확실하게 말하기는 어렵다. 비결정론(non-determinism) 만세 :)


