Muse Spark Open 출시: 현재까지 가장 뛰어난 미국 오픈 웨이트 모델
Introducing Muse Spark Open: the most capable US open-weight model to date
핵심 요약
메타가 코딩과 에이전트 작업에 최적화된 816B 파라미터의 오픈 웨이트 모델 'Muse Spark Open'을 공개했습니다.
- 모델 사양 — 816B 파라미터와 1M 토큰 컨텍스트 윈도우를 지원함
- 최적화 지원 — SGLang, vLLM, Apple MLX 등 주요 엔진 및 하드웨어 가속 지원
- 라이선스 정책 — 제한적 상업 이용이 가능한 Muse 모델 라이선스로 배포됨
- 성능 논란 — 뛰어난 성능 기대와 함께 과도한 안전 학습 및 기술적 비효율성에 대한 비판 공존
안녕 r/LocalLlama 형들 -
오늘 우리가 지금까지 나온 미국 오픈 웨이트 모델 중 가장 성능 좋은 Muse Spark Open을 공개하게 됐어.
코딩이랑 에이전트 작업에 특화돼서 긴 호흡의 작업, 복잡한 소프트웨어 엔지니어링, 다단계 추론에 아주 강해.
주요 모델 사양
-
파라미터: 전체 816B / 활성 42B
-
컨텍스트 윈도우: 1M 토큰
-
모달리티: 텍스트, 이미지, 비디오, 오디오
-
안전성 사후 학습: Meta의 Superintelligence Scaling Framework 하에 평가를 거친 추가 안전성 사후 학습 적용.
추론, 파인튜닝 및 배포
-
Helion GPU 커널: SGLang에 커스텀 자동 튜닝 Helion 커널이 포함돼서 NVIDIA랑 AMD GPU에서 1.03~3.95배 커널 속도 향상을 보여주고, AMD MI350에서는 E2E 성능이 3% 개선됐어.
-
엔진: SGLang, vLLM, TensorRT-LLM, Hugging Face Transformers, Apple MLX, llama.cpp, Unsloth 같은 주요 추론 엔진에서 돌아가고, AMD, Apple, Intel, NVIDIA 실리콘에 최적화돼 있어.
-
Apple Silicon 최적화: 고성능 모델 접근성을 높이려고 최신 MLX 프레임워크를 쓰는 Apple M5 Ultra Mac Studio 두 대에서 돌아가도록 최적화했어.
-
파인튜닝: 개발자들은 PyTorch랑 파인튜닝용 TorchTitan을 써서 모델을 입맛대로 커스텀할 수 있어.
-
API 플랫폼: 오늘부터 Baseten, Fireworks AI, Groq, Modal, Nebius, OpenRouter, Together AI에서 바로 쓸 수 있어.
-
다운로드: 모델 웨이트는 Amazon SageMaker AI, Google Cloud Model Garden, Hugging Face, Microsoft Foundry Models에서 받을 수 있어.
Muse Model License로 웨이트를 공개하는데, 제한적인 상업적 조건이 붙어있긴 해도 많은 개발자가 무료로 쓸 수 있게 해놨어.
형들의 피드백 기다릴게!
