Ornith-1.5-35B-A3B-NInfer - 250 tok/s, 5-8k prefill, 5090

이 모델들은 스스로 학습하면서 개선하려고 노력함. 개발자 그래프에 나온 것처럼 랩 테스트에서 좋은 결과 내려고 튜닝된 거지. 벌써 실제 환경에서 Ornith를 독립적으로 평가한 글들 보면 성능이 훨씬 떨어진다는 얘기가 많음.

아, 1.5 버전은 몰랐네. 1.0은 알고 있었는데, 말했듯이 지금 놀라워하는 그 속도는 Qwen3.6 35B A3B 자체의 성능임. 걔네는 아마 벤치마크 점수 뽑으려고 파인튜닝만 한 것 같은데, 다들 알다시피 처음부터 학습한 게 아니라서 "agentic coding" 벤치마크 데이터셋에만 맞추면 다른 부분 성능이 떨어질 수 있음. 결국 성능을 맞바꾸는 셈이지. 만약 영어 능력 같은 곳에서 성능이 떨어진다면...

맞아, 걔네가 MTP head 학습을 안 시키고 랜덤 초기화 상태로 배포했거든(내 기억이 맞다면). 이번엔 학습시켰길 바랐는데 그래서 물어본 거임.