r/LocalLLaMA•16일 전•59•11
Agnes-3.0-Flash의 정체는 무엇인가?
What's the Story with Agnes-3.0-Flash?
핵심 요약
ArtificialAnalysis 벤치마크에서 Qwen3.8을 앞선 것으로 알려진 Agnes-3.0-Flash의 모호한 공개 방식과 실체에 대한 의문 제기.
- 벤치마크 논란 — API 모델과 오픈 웨이트 버전의 성능 차이로 인한 혼란 발생
- 모델 실체 의문 — 허깅페이스에 공개된 'Preview' 버전과 실제 평가 모델의 상이함
- 오픈 소스 전략 — 최종 모델 공개 여부가 불투명한 상황
- 개발사 배경 — 싱가포르 기반의 연구소로 알려졌으나 파운데이션 모델 역량은 미지수
huggingface.co
원문 사이트로 이동
벤치마크 사이트 구경하다가 최근에 나온 33B 파라미터 모델 하나를 발견했는데, ArtificialAnalysis(AA) 인텔리전스 지수에서 Qwen3.8 27b를 이겼다고 하더라고. 당연히 눈이 번쩍 뜨였지. 근데 좀 파고들다 보니까 슬슬 머리가 복잡해지기 시작함.
얘네 HF 모델은 지금 "Preview"라고 적혀 있고, AA가 평가한 모델이랑은 다른 거라고 대놓고 써놨음. AA 목록에는 이 모델이 독점(proprietary)이라고 되어 있는데, 정작 "개방성(Openness)" 점수는 Qwen3.8 27b보다 높게 줬더라. 웹사이트랑 HF 페이지에서는 둘 다 "모두를 위한" 개방성과 지능을 떠들어대고 있고.
"Preview"라고 딱지 붙여놓은 거 보면 나중에 오픈 웨이트 버전이 나올 수도 있겠다는 생각이 들긴 하는데, 지금 HF에 올라온 거랑 비슷하기나 할지 단서가 하나도 없음. AA는 평가한 모델의 파라미터 수도 안 보여주니까, 아예 다른 아키텍처일 가능성도 충분함.
혹시 얘네 연구소나 의도, 아니면 이 새로운 모델에 대해 뭐 아는 사람 있음? 써본 사람 있냐?
