Claude Fable 5 vs Sol 5.6. 드디어 경쟁자가 나타난 건가?

ㄹㅇ!

그리고 근본적인 아키텍처와 도메인 지식 측면에서 보면, 벤치마크는 그냥 설치하고 잊어버리는 용도라고 봄. 내가 개인적으로 흥미를 느끼는 건 그 아래에 있는 부분이지 벤치마크가 아님... 파일, 폴더, 구조, 아키텍처가 결과물과 배포되는 내용에 더 중요함. 벤치마크는 그냥 헬스장 운동선수들용이지 하하.

Sol은 몇 달 된 프리뷰 버전이랑만 벤치마크 비교한 거 아님?

그럼 내가 직접 'vibe code'로 새로운 벤치마크를 짜야 한다는 거임? ;)

당연하지, 그게 현실적인 방법일 듯.

동의함, 만약 공개적으로 사용 가능해지거나 누군가 결과물을 생성해서 내 방식대로 검증해 줄 수 있다면 https://testingmodels.com/ 에 추가할 예정.

써보고 어땠는지 알려줘

GPT 5.5는 사실 이미 상당히 에이전트 같고, 궤도를 벗어나지 않고 몇 시간씩 작업할 수 있음. 내 생각에 Fable의 강점은 의도를 정확하게 해석하는 건데, 5.5는 더 문자 그대로 받아들여서 가끔 큰 그림을 놓치기도 함. Fable은 서브 에이전트들을 조율하는 능력도 뛰어나서 진짜 큰 작업들을 처리하는 데 더 유리함. 5.6은 새로운 베이스 모델이 아니니까, 아마 5.5에 RL을 더 입힌 버전일 듯: 서브 에이전트나 장기적인 작업 수행 능력은 더 좋아지겠지만, 문맥을 파악하고... 하는 능력은 여전히 Fable을 못 따라올 것 같음.