6.1-Sol vs. Opus 5.5 - 20달러 플랜에서의 간단한 작업 비교 결과
6.1-sol vs. Opus 5.5 - small task on both $20 plan. Results inside
핵심 요약
6.1-Sol과 Opus 5.5의 성능 및 사용량 제한을 비교한 결과, Opus가 훨씬 효율적인 것으로 나타났습니다.
- 성능 비교 — 6.1-Sol과 Opus 5.5 모두 동일한 작업 수행 결과는 유사함
- 사용량 제한 — 6.1-Sol은 5시간 제한의 18%, Opus 5.5는 7%를 소모함
- 비용 효율성 — 6.1-Sol이 더 저렴함에도 불구하고 실제 사용량 제한 효율은 Opus가 더 높음
- 모델 선택 — 간단한 작업에는 고성능 모델보다 가벼운 모델 사용이 권장됨
프로젝트나 접근 방식, 코드 가지고 뭐라 하지 마라. 그냥 비교하는 거니까.
과제:
"프로젝트 전반에 걸쳐 recordId: number를 받아서 내부적으로 ID를 통해 레코드를 가져오는 컴포넌트가 여러 개 있음. 이거 필요 없음. 부모가 이미 전체 레코드 객체를 가지고 있으니까, ID를 넘겨서 (캐시에서라도) 객체를 다시 가져오게 하지 말고 그냥 객체 전체를 넘기는 방식으로 바꿔라."
둘 다 똑같은 특정 이유(이유는 중요하지 않음) 때문에 recordId를 남겨둔 곳이 한 군데씩 있었음. 둘 다 그 부분까지 마저 바꾸라는 후속 프롬프트를 똑같이 받음.
둘 다 거의 똑같이 일을 처리했고, 결과는 다음과 같음:
6.1-Sol-medium:
14 files changed: +140 lines, −132 lines
Opus 5.5 medium:
16 files changed, 155 insertions (+), 136 deletions (−)
- 둘 다 $20 플랜
- 둘 다 꽤 빨리 끝냄. 쉬운 작업이었음
- 결과는 똑같음. 차이가 난 건 Opus가 유닛 테스트 2개를 더 수정해서 그런 거임 (이건 뭐 중립적이라고 봄)
6.1 Sol medium은 5시간 제한의 18% 사용
Opus 5.5 medium은 5시간 제한의 7% 사용
OpenAi, 분발 좀 해라...
