Fable이 이 3D 도시 전체를 한 번에 구축해냈음. 아직도 믿기지가 않네

Claude Fable 5랑 Opus 5한테 똑같은 스타터 레포랑 에셋 던져주고 테스트해 봤음.

첫 번째 과제는 브라우저 기반 심시티 스타일 게임 만들기였는데, 도로, 교통, 구역 설정, 건물 건설, 인구, 일자리, 전력, 돈, 수요, 그리고 낮밤 주기까지 다 구현해야 했음.

둘 다 실제 3D 건물, 도로, 자동차, 나무 에셋을 써야 하는 조건이었고.

근데 Fable이 진짜 미친놈처럼 잘 뽑아냄.

윌 스미스 영상 나오던 게 엊그제 같은데 벌써 여기까지 왔네.

Fable은 에셋 카탈로그 싹 훑더니 스케일이랑 회전값 다 조절해서 주거 구역, 공업 단지, 공원, 도로, 도심, 수변 구역까지 알아서 척척 배치하더라.

결과물은 이거임:

1 hour 3 minutes
$73.18
5,702 lines added
248.9K Fable output tokens
45.35M cached tokens read

Opus도 요구한 시스템 대부분은 만들었는데, UI나 에셋 활용도가 Fable에 비해 훨씬 조잡했음.

결과물은 이거:

1 hour 29 minutes
$53.40
9,053 lines added
422.4K output tokens
68.1M cached tokens read

Opus가 비용은 더 쌌는데, 작업 시간은 더 걸리고 코드도 훨씬 많이 짰음. 출력 토큰도 70% 정도 더 썼고.

결과물 퀄리티 차이가 너무 심함.

두 번째 과제로는 아까 만든 도시에서 이어서 작업하라고 시켰음.

폭우, 화재, 도로 통제, 교통 마비, 전력난, 경제적 타격 같은 재난 상황을 추가해야 했고.

거기에 실제 슬랙(Slack) 사고 보고서 작성, 같은 스레드에 업데이트 올리기, 구글 시트에 최종 결과 기록까지 하라고 함.

근데 Fable은 여기서 더 미친 짓을 함.

Three.js로 비 내리는 효과를 바닥부터 직접 다 짰음. 비 에셋이나 미리 만들어진 날씨 효과 같은 건 하나도 안 줬는데 말이야.

슬랙이랑 구글 시트 연동도 완벽하게 돌아갔음.

결과물은 이거:

47 minutes
$45.28
4,195 lines added
193.6K Fable output tokens
26.2M cached tokens read

Opus는 이번 과제에선 훨씬 잘했음. 기능 대부분이 정상 작동했고 구현도 나쁘지 않았거든.

근데 결과물은 이랬음:

43 minutes
$53.29
5,311 lines added
185.3K output tokens
89.2M cached tokens read

Opus가 가성비 좋은 선택지일 줄 알았는데.

오히려 두 번째 과제에서 돈 더 많이 쓰고, 캐시된 토큰은 세 배 넘게 읽어댐. 도대체 왜 이러는 거임??

두 코딩 과제 전체를 놓고 보면: