Codex에 수천 달러를 썼고, 드디어 Claude와 심층 비교를 해봤다
I've spent thousands on Codex, and finally I did deeply compare Claude against that
핵심 요약
Codex와 Claude의 성능 및 비용 효율성을 비교한 결과, Claude가 사용량 제한과 속도 면에서 훨씬 우월하다는 분석입니다.
- 모델 성능 비교 — Astra와 Opus는 지능 면에서 비슷하나 Opus가 설계와 작문에서 앞섬
- 성능 및 속도 — Claude의 Opus가 Codex의 Astra보다 훨씬 빠르고 효율적임
- 비용 효율성 — Claude의 20달러 플랜이 Codex의 100달러 플랜보다 사용량 제한 면에서 압도적임
- 환경 투명성 — Claude 확장이 Codex보다 실행 중인 명령어를 더 투명하게 보여줌
이건 불만 토로가 아니라 그냥 비교글임
난 연간 Plus Business 라이선스, 100달러짜리 Pro 계정, 그리고 Devday 전까지는 200달러짜리 계정까지 써왔음. 항상 제공되는 한계치까지 쥐어짜면서 썼는데, 뭐 순탄한 길은 아니었지.
나한테 가장 중요한 에이전트 코딩의 핵심 요소는 크게 3가지임:
-
생성되는 코드의 퀄리티, 모델의 능력치
-
모델의 성능 (속도 측면)
-
돈 쓴 만큼 뽑아내는 작업량
1) 모델 퀄리티 비교
Codex 쪽은 Sol 6.1이랑 Astra를 쓰는데, 중요한 건 Astra로 돌리고 구현 작업이나 간단한 건 Sol 6.1로 돌림.
Claude는 Sonnet 5.5랑 Opus 5.5를 쓰는데, 방식은 똑같음.
지능 면에서 보면 Astra xhigh랑 Opus xhigh는 거의 비슷함. 둘 다 실수도 하고, 코드 짜다가 서로 수정도 해주고 퀄리티는 거의 판박이인데, 디자인이나 글쓰기 쪽은 Opus가 압도적으로 앞섬.
Sonnet이랑 Sol 6.1도 능력치는 비슷비슷함.
2) 모델 성능
Astra fast 모드가 Opus 5.5 slow 모드보다 훨씬 느림. 특히 fast 모드 비용까지 생각하면 차이가 진짜 숨 막힐 정도임.
Sonnet도 Sol 6.1이랑 비교하면 똑같음 (Codex 쪽 Sol이 워낙 느려 터져서).
Claude에서는 /fast를 한 번도 안 썼는데, Codex에서는 거의 강제 수준임.
3) 돈 쓴 만큼 뽑아내는 작업량
Claude 20달러짜리 "Pro" 라이선스도 몇 달 전부터 Codex의 Plus나 Business처럼 5시간 제한이 생겼음.
근데 Claude 20달러짜리 5시간이랑 Codex Plus 플랜 5시간은 체감상 2주 정도 차이 남.
실제 예시를 들자면, Codex Astra(서브 에이전트 2개)랑 Claude Opus(서브 에이전트 2개)한테 똑같은 작업을 시켜봤음 (fast 모드 아님).
- Codex Plus 계정은 5시간 제한이 2분도 안 돼서 바닥남. 작업은 시작도 안 했는데 말이지. 어이가 없어서 바로 다 취소했음.
- 똑같은 작업을 Opus한테 시켰더니 코드 떡칠하는 세션에서도 1시간 동안 쌩쌩하게 돌아가더라. 5시간 제한 다 쓰는 데 1시간 더 걸렸음.
Claude 20달러 구독이 Codex 100달러 구독보다 훨씬 나음. "사용량 제한" 차이가 이 정도로 심각함.
심지어 Claude는 /fast 모드가 기본인데도 이 정도임.
업데이트:
vscode에서 테스트했고, 사용감은 둘 다 비슷한데 Claude 익스텐션이 뭐가 돌아가는지 더 투명하게 보여줌. Codex는 자주 쓰는 명령어들을 자꾸 숨기려고 해서 좀 별로임.
테스트랑 작업 환경, 코드베이스는 전부 동일함.
업데이트 2:
한 가지 빼먹은 게 있는데, Codex는 chatGPT를 덤으로 줌. 아직까지는 이게 나름 가치가 있음.
요즘은 반응 없으면 자동으로 "작업" 모드로 넘기는 타이머 같은 게 생겼는데, Claude에는 없는 기능이라 이건 좀 괜찮음.
근데 chatGPT에 들어있는 모델들이 Codex 모델만큼 퀄리티가 안 나와서 가치가 많이 떨어짐. 테스트 엄청 많이 해봤는데 Pro 모델조차도 최고의 Codex 모델들에는 못 미치더라.


