Reflection 70B가 출시된 지 2년이 지났습니다 (2024년 9월)
Reflection 70B was released two years ago (September 2024)
핵심 요약
과거 큰 화제를 모았던 Reflection 70B의 사기극을 되돌아보며, 현재의 LLM 과대광고 문화를 비판하는 글입니다.
- Reflection 70B 사기극 — GPT-4o를 압도한다고 홍보했으나 실제로는 Llama 3.1 모델을 재포장한 것에 불과함
- 과대광고 비판 — 커뮤니티 내에서 실체 없는 모델들이 혁명인 것처럼 포장되는 현상을 지적함
- Matt Shumer 논란 — 사기극의 주역이 여전히 업계에서 영향력을 행사하고 OpenAI의 프리뷰 권한까지 받는 것에 대한 반감
- LLM 평가 회의론 — 새로운 모델이 나올 때마다 무비판적으로 열광하는 분위기에 대한 경각심
jev, OpenClaw나 TurboQuant가 개쩐다고 생각할지 모르겠지만, 사실 LLM 역사상 가장 쩌는 발명품은 2년 전에 나왔다.
우리 모두 알다시피 LLM에 대한 가장 신뢰할 수 있는 정보의 출처는 유튜브지:
2024년 9월, 갑자기 툭 튀어나온 Reflection 70B가 GPT-4o를 박살 냈다고 주장하는 오픈 소스 모델로 발표됐었음.
근데 딱 하나 작은 문제가 있었지. 사람들이 다운로드를 받았거든. 그리고 테스트를 해버린 거야 :(
알고 보니 Reflection 70B는 그냥 Llama 3.1이었음.
그래도 결국 미스터리는 풀렸다.






