Ling-3.0, 6개 베이스 체크포인트 공개: 2개 사이즈 × 3개 단계
Ling-3.0 released all 6 base checkpoints: 2 sizes × 3 stages
핵심 요약
AntLing이 Ling-3.0 베이스 모델의 6개 체크포인트(tiny, flash)를 MIT 라이선스로 공개함.
- 모델 공개 — Ling-3.0 베이스 모델의 6개 체크포인트가 공식적으로 배포됨.
- 단계별 구성 — 사전 학습, 중간 학습, WSM 병합 등 3단계로 나뉘어 제공됨.
- 라이선스 — 모든 체크포인트는 MIT 라이선스를 따르며 자유롭게 사용 가능함.
- 활용 목적 — 챗봇용이 아닌 추가 사전 학습 및 연구용 베이스 모델로 출시됨.
AntLing에서 Ling-3.0 베이스 모델을 위한 6개 체크포인트 매트릭스 전체를 공개했다.
-
tiny: pretrained, mid-trained, WSM-merged
-
flash: pretrained, mid-trained, WSM-merged
실제 결과물은 이름만 바꿔서 올린 엔드포인트 하나가 아니라, 공식 저장소 6개를 따로따로 푼 거다. 확인해 보니까 6개 전부 공개 상태고 별도 승인 절차도 없으며, 각각 MIT 라이선스를 따른다.
전부 베이스 체크포인트고 후속 학습(post-trained)은 전혀 안 된 상태다. 바로 채팅이나 인스트럭트용으로 쓰는 게 아니라, 추가 사전 학습이나 파인튜닝, 연구용으로 쓰라는 소리다.
첨부된 스테이지 맵은 릴리스 스레드에 올라온 원본 이미지 그대로다. 이건 그냥 참고용이지, 독립적인 검증 결과가 아니니까 착각하지 마라.
개발자들 입장에서 꿀인 건 학습 단계별로 골라 잡을 수 있다는 거다. pretrained, mid-trained, WSM-merged 중에서 입맛대로 고르면 된다. 물론 어떤 단계가 모든 다운스트림 작업에 최고라거나, 양자화 이후에 어떤 모습일지는 아직 아무도 모른다.
베이스 모델 쪽 파고 있는 놈들이라면 "base" 모델 하나만 딸랑 보지 말고, 이 6개 체크포인트 맵을 하나의 패밀리로 묶어서 뜯어보는 게 좋을 거다.
