솔직히 말해서, Anthropic이 Opus 5.5 성능 너프 안 하면 몇 년이고 Max 구독 유지할 거임...

2주 뒤면 Opus 5.5 아마겟돈 시작임.

얼마나 긴데?

형, 너프당하기 전까지만 이 소리 하지, 막상 너프되면 바로 구독 취소 버튼 누를 거면서.

Anthropic 숏 100배 레버리지 간다, 손절은 없다 😭

다들 도대체 뭘 하길래 그렇게 대단하다고 하는 거야? 다른 사람들의 프로젝트가 궁금하네. 난 5.5도 괜찮긴 한데 아직까지 엄청나게 놀랍지는 않거든.

5.5 출시 전날 난 머리를 쥐어뜯고 있었어.

250단어짜리 문서랑 상세한 프롬프트를 업로드했는데, Opus 5는 내 프롬프트의 90%를 무시하고 짧은 문서 내용에서 사실 관계를 4개나 틀리더라고. 게다가 내가 시키지도 않은 짓을 하느라 컨텍스트를 엄청나게 낭비했지. 수정해달라고 했더니 아부만 떨고, 지어낸 내용을 뒷받침하려고 가짜 연구 자료까지 인용하더라.

5.5가 출시됐을 때 90페이지 분량의 밀도 높은 문서를 업로드해 봤어(4.6은 한 번에 50~60페이지 정도밖에 못 다뤘거든). 수천 단어였는데 이걸 다 흡수하고 컨텍스트를 유지하면서 내가 지시한 대로 정확하게 수행하더라고. 아부도 없고, 지어낸 내용도 없고, 정확도도 높았어. 인용된 연구 논문들도 직접 확인해 보니 다 맞았고.

시간은 엄청 걸리지만, 결과물이 좋고 시키는 대로만 해준다면야 그 정도는 상관없어.

근데 5턴 정도 지나니까 컨텍스트를 놓치기 시작하더라. 징후는 항상 똑같아. "그게 지금까지 말씀하신 것 중 가장 중요한 내용이네요" 같은 소리를 하기 시작하면, 그때부터는 끔찍한 아부 모드로 넘어가고 말투도 가벼워지면서 분석을 멈춰버려.

그러니까 훨씬 나아진 건 맞는데, 아직까지 나를 완전히 압도할 정도는 아니야. 그래도 아직 tasks 기능은 안 써봤으니까 내일 아침에 한번 해보려고.