Diffuspace/Clover-35B-A3B-Preview · 허깅페이스

Term bench 2.1은 그렇게 벤치마크 점수 올리기 쉬운 건 아니지 않나? 4.0보다는 덜 빡센 대안으로 여전히 꽤 쓰이는 거 같긴 한데.

Gated Delta Net까지 확산 모델에 더 적합하게 수정했네. 아주 좋아.

이 모델을 위한 llama.cpp PR https://github.com/ggml-org/llama.cpp/pull/31306

128K 컨텍스트 돌리려면 메모리가 얼마나 필요할까? 16GB VRAM에 INT4로 테스트했다는데, 가중치랑 전체 컨텍스트가 16GB에 다 들어가는지는 정보가 없네.

멋져 보이네! 내 오프로드 환경에서 쓸 수 있게 GGUF나 Strata 호환 버전이 나올지 기다려봐야지.

우리는 Clover-35B-A3B-Preview를 MiniCPM-V 4.7, LFM2.5, Nemotron 3.5 Lightning, Gemma 4 등 대표적인 경량화 및 온디바이스 배포 가능 모델들과 비교했습니다.

왜 Qwen 3.6 35b랑은 비교 안 한 거지?! 이 범위에서 진짜 경쟁자고, 확산 모델 튜닝만 빼면 같은 아키텍처 기반인데 이상하네!