Muse Spark 1.2 - 초기 사용 후기 (Flash와 비교)
Muse Spark 1.2 - my initial impressions (compared to Flash)
핵심 요약
Muse Spark 1.2를 사용해 본 결과 Flash와 성능은 비슷하지만, 데이터 공유 옵션과 캐시 적중률에서 차이가 있음.
- 성능 비교 — Terminal-Bench 2.1 기준 Flash와 거의 동일한 수준임
- 데이터 공유 — Contributor 옵션 사용 시 Meta와 데이터 공유가 필수적임
- 사용성 — 코드 리팩토링 및 탐색 작업에서 빠르고 안정적인 성능을 보임
- 캐시 효율 — Flash 대비 캐시 적중률이 다소 낮아 비용 효율성이 떨어짐
Muse Spark 반나절 정도 써봤는데, 그냥 데일리로 굴리기엔 꽤 괜찮은 모델임.
중요 참고: 메타에 데이터 넘기기 싫으면 'Contributor' 버전은 쓰지 마라.
간단한 팩트 체크:
- 컨텍스트 윈도우 1M 지원함
- Opencode Go 플랜(Contributor 버전 기준)에서 월 226,600회 요청이라는 혜자스러운 할당량을 줌.
- Terminal-Bench 2.1에서 82.9% 찍어서 DS4 Flash(82.7%)랑 거의 차이 없음. 사실상 똑같다고 보면 됨.
주로 어디에 쓰냐고?
- 기존 코드베이스 리팩토링 (Flutter)
- 코드베이스 탐색, 아키텍처 논의
- 버그 잡기
- ... 뭐 이런 류의 작업들
난 긴 자율 루프 같은 건 안 돌려서 Spark가 그런 거 얼마나 잘하는지는 모르겠음. 코딩 파트너로서는 빠릿빠릿하고 자신감 있게 일 잘함. 코드베이스 뒤질 때 뺀질거리지도 않고.
Flash랑 비교하면 어떠냐고? 음, 솔직히 말해서 (적어도 내가 쓰는 환경에선) 별 차이 못 느끼겠음. 코드도 깔끔하게 잘 짜고, 내가 놓칠 법한 사소한 부분도 잘 잡아냄. Opencode 툴(git, 웹 검색 등)도 문제없이 잘 써먹고.
딱 하나 거슬리는 건 캐시 적중률이 왜인지 ~85% 정도에서 노는 거임. Flash 쓸 땐 보통 ~95-98%였거든. 그래서 예상보다 비용이 좀 더 나가는 느낌임. 근데 이건 좀 더 지켜봐야 확실해질 듯. 섣불리 판단하긴 이르니까.
일단 계속 써볼 생각임. 쓰다 보면 더 자세한 게 보이겠지. 근데 지금까진 딱히 깔 만한 구석은 없음.
