모델 성능 저하 이론은 그냥 당신이 게을러진 것일지도 모른다.
The model nerfing theory might just be you getting lazier.
핵심 요약
Claude의 성능 저하가 모델의 문제가 아니라 사용자의 프롬프트 관리 소홀 때문이라는 주장에 대해 사용자들의 의견이 엇갈리고 있습니다.
- 성능 저하 원인 — 모델 자체의 너프보다는 사용자의 프롬프트 관리 방식이 느슨해진 것이 원인일 수 있음
- 사용자 책임론 — AI를 숙련된 직원처럼 다루기 위해 엄격한 표준 운영 절차와 명확한 지시가 필요함
- 성능 저하 의혹 — 과거 Anthropic이 성능 저하를 인정한 사례를 근거로 기업의 의도적 너프를 의심하는 시각 존재
- 사용자 경험 차이 — 프롬프트 최적화의 중요성을 인정하면서도, 모델의 일관되지 않은 성능에 답답함을 느끼는 사용자들
Claude Pro 20달러짜리 모델을 한 6개월 정도 쓰면서 내 앱들도 몇 개 만들어봤거든. 그동안은 제한 걸릴까 봐 쫄아서 세션 하나하나 빡세게 관리하고, 프롬프트랑 문서에 최대한 쑤셔 넣으면서 나름 잘 굴러갔단 말이지.
그러다 큰맘 먹고 최고 등급 구독을 질렀어. 와, 프롬프트 하나하나 눈치 안 봐도 되는 게 진짜 속이 다 시원하더라. 제한도 엄청 널널하고. 근데 시간이 갈수록 내가 점점 나태해지는 거야. 결과물도 예전만 못하고. 새 세션을 파야 할 상황인데도 귀찮아서 그냥 하던 세션에 계속 이어 붙이기도 하고 말이야.
Plan 모드 쓰는 게 귀찮아서 그냥 대충 타이핑할 때도 있고, 얘가 작업한 거 정리하라고 시키는 것도 까먹어서 나중에 보면 퀄리티가 팍 떨어져 있어. 에이전트는 네가 아니야. 네가 직접 관리해야 한다고. 빈틈없는 표준 운영 절차(SOP)를 만들어두고 굴려야지.
이거 완전 개쩌는 직원 하나 둔 거랑 똑같아. 최고의 지시사항이랑 작업 환경, 정보들을 제대로 안 주면, 결국엔 지 맘대로 대충대충 쉬운 길로만 가려고 한다고.
물론 제한이나 토큰 같은 게 바뀌는 건 나도 알아. 근데 난 얘네가 모델 지능을 일부러 "너프"시킨다고는 생각 안 해. 출시 직후의 opus 5랑 지금의 opus 5를 똑같은 작업으로 돌려서 확실한 벤치마크를 보여주는 게 아니라면, 그냥 카더라 통신일 뿐이잖아. 오히려 모델이 똑똑해질수록 사람이 점점 "멍청해진다"는 가설이 내 머릿속에서 점점 확고해지고 있어.
