r/LocalLLaMA•6개월 전•267•58
Gemma 4, 덴마크어, 네덜란드어, 프랑스어, 이탈리아어 등 여러 유럽 언어에서 엄청난 성능 향상
Gemma 4 is a huge improvement in many European languages, including Danish, Dutch, French and Italian
핵심 요약
Gemma 4 31B 모델이 여러 유럽 언어 벤치마크에서 최상위권 성적을 기록하며 뛰어난 언어 처리 능력을 입증함.
- 벤치마크 성능 — Gemma 4 31B가 핀란드어 1위 등 다수의 유럽 언어에서 최상위권 성적을 기록함.
- 실제 활용도 — 벤치마크 결과와 달리 실제 사용 시 언어적 일관성이나 정확도에서 차이가 있을 수 있다는 의견이 있음.
- 역할극 능력 — 31B 모델이 별도의 파인튜닝 없이도 판타지 세계관 지식과 캐릭터 연기력이 뛰어남.
- 언어별 편차 — 유럽 언어에서는 강세를 보이나 헝가리어 등 일부 언어에서는 이전 모델 대비 개선이 미미하다는 평가도 존재함.
벤치마크 결과는 이런 작은 모델치고 정말 인상적임. 일반적인 성능도 꽤 괜찮음. Gemma 4 31B는 (테스트된 모든 모델 중):
- 네덜란드어 3위
- 덴마크어 2위
- 영어 3위
- 핀란드어 1위
- 프랑스어 2위
- 독일어 5위
- 이탈리아어 2위
- 스웨덴어 3위
실제 경험도 이와 일치하는지 궁금함.
