Opus 5: 다들 RL 때문에 맛이 가고 실수투성인가요?

일부는 신기루 같은 거야. Opus 5는 자기 코드에 대해 무작위로 발작하지만, 결국 최종 코드 diff는 괜찮거든. 내 생각에 진짜 문제는 Opus 5가 코드 뒤에 숨은 본질이나 큰 그림을 이해하는 데 있어 극도로 신뢰할 수 없다는 거야. 한 걸음 물러서서 큰 그림을 고려하고, 이를 통해 문제에 대한 우아한 해결책을 찾는 걸 못 해. 참고로 Opus 5는 Opus 4.8보다 훨씬 생각을 덜 해. 두 모델로 블라인드 테스트를 해봤는데, Opus 5는 생각하는 시간의 절반을...

"결국엔 해낼 거야"라는 말이 토큰을 더 낭비해야 한다는 뜻이라면 별로 안심이 안 되지.

나도 정확히 똑같은 경험을 했음. 프로그래밍 측면에서 보면 너무 과하게 주도적이라서 말도 없이 큰 변화를 줘버리는데, 이게 놓치기가 너무 쉬움. 성격 면에서도 엄청나게 자신감 넘치고 이상할 정도로 방어적임. 내가 하지 말라고 해도 자기 결정을 고집스럽게 방어하고, 심지어 내 기존 작업물을 대놓고 비하하기도 했음.

ㅋㅋㅋㅋㅋ ㄹㅇ

맞음, Opus 5는 4.6이랑 비교하면 브레인스토밍이나 긴 문서 평가할 때 진짜 별로임. 그리고 자꾸 '왜 x를 안 할 건지 설명해 줄게'라면서 두 문단씩 떠들어대는데, 정작 x는 내가 제안한 적도 없고 상식적인 사람이라면 절대 안 할 짓임.

더 나은 모델 나올 때까지는 4.6 쓸 거임. 난 아직 Fable이 거절 안 하는 프롬프트를 못 찾았음.

왜 x를 안 할 건지 설명해 줄게라면서 두 문단씩 떠들어대는데, 정작 x는 내가 제안한 적도 없고 상식적인 사람이라면 절대 안 할 짓임.

나도 똑같음. 무슨 멍청이 취급하면서 사소한 것까지 앉혀놓고 훈계하려 듦. 더 짜증 나는 건 '이거 진짜 긴급함!!11!' 하는 말투임 ㅋㅋㅋ 아니 꼼꼼한 건 고마운데 왜 내가 청문회에서 심문받는 기분이냐고 ㅋㅋㅋ