규제 위험을 줄이려고 Fable과 Sonnet의 성능을 낮춘 걸까?

모든 AI 연구소들이 코딩 외의 영역에서 정말 고전하고 있다고 생각함. 코딩과 수학은 시스템 특성상 학습시키기가 비교적 쉽거든. 하지만 글쓰기나 전략적 계획 같은 나머지는 훨씬 더 어려운 게 분명함.

어느 쪽이 더 어려운지는 잘 모르겠음. Claude는 원래 큰 그림을 그리는 전략적 사고나 계획 수립, 초안 작성 같은 데 능했으니까.

내 생각엔 코딩 능력과 기획 능력을 동시에 극대화하는 게 어려운 것 같음. 하나는 1만 피트 상공에서 내려다보는 큰 그림이고, 다른 하나는 아주 세밀한 실무 작업이니까.

한쪽을 최대치로 올리면 다른 쪽이 저하되는 것 같고, 그래서 코딩하는 쪽이나 기획하는 쪽이나 번갈아 가며 불만을 터뜨리는 듯함.

확실한 건 이 시스템들을 모든 중요한 능력치에서 동시에, 통제된 방식으로 꾸준히 향상시킬 수 있는 체계적인 이해도가 아직 없다는 거임.

난 벤치마크 점수는 그냥 무시함. 중요한 건 내 작업에서 어떻게 작동하느냐니까. 난 기획과 글쓰기 작업도 하지만, 아주 세밀한 코딩 작업도 하거든.

정확히 짚었네. 완전 동감함.

맞음, 왜냐면 IPO 전에 레딧을 봇으로 도배하려고 컴퓨팅 자원을 다 쓰고 있거든.