DeepSeek v4 Flash의 눈에 띄는 성능 향상
DeepSeek v4 Flash has a nice bump in Capability
핵심 요약
DeepSeek V4 Flash가 벤치마크에서 대폭적인 성능 향상을 보이며 업계의 주목을 받고 있습니다.
- 벤치마크 급상승 — Terminal Bench 및 Toolathlon 등 주요 지표에서 큰 폭의 성능 개선을 기록함
- 신규 벤치마크 도입 — NL2Repo, Cybergym 등 다양한 에이전트 관련 테스트가 추가됨
- GPT-5.6과 경쟁 — 일부 지표에서는 GPT-5.6 Terra를 앞서며 치열한 경쟁 구도를 형성함
- 학습 효율성 논란 — 벤치마크 점수 향상이 실제 성능 개선인지 단순히 점수 맞추기(benchmaxxing)인지에 대한 의견이 갈림
DeepSeek V4 Flash: Preview → 2026-07-31
| Benchmark | Preview | 0731 | Δ |
|---|---|---|---|
| Terminal Bench* | 56.9 | 82.7 | +25.8 |
| Toolathlon | 51.8 | 70.3 | +18.5 |
| NL2Repo | — | 54.2 | new |
| Cybergym | — | 76.7 | new |
| DeepSWE | — | 54.4 | new |
| Agent Last Exam | — | 25.2 | new |
| Automation Bench | — | 25.1 | new |
| DSBench-FullStack | — | 68.7 | new |
| DSBench-Hard | — | 59.6 | new |
- Terminal Bench는 v2.0 → v2.1로 변경되었으므로, 이번 향상이 엄밀한 1:1 비교는 아님.
GPT-5.6 Terra와 비교
| Benchmark | GPT-5.6 Terra | DeepSeek V4 Flash | Advantage |
|---|---|---|---|
| Terminal Bench | 78.4 | 82.7 | Flash (+4.3) |
| Toolathlon | 53.1 | 70.3 | Flash (+17.2) |
| DeepSWE | 69.6 | 54.4 | Terra (+15.2) |
| Agents' Last Exam | 50.4 | 25.2 | Terra (+25.2) |
서로 치고받는 상황이지만, 확실한 승자는 없음... 매우 흥미로움!
출처:
