Xiami mimo-v2.5 pro MIT license surpasses Opus 4.5 on arena
오픈 웨이트 모델인 Mimo v2.5가 LMSYS 아레나 코딩 부문에서 Opus 4.5를 제치고 9위에 올랐음.
많은 사람들이 Opus보다 나은 오픈 웨이트 모델이 언제 나올지 물어봤지. 자, 이제 나왔어. Mimo가 9위고 Opus 4.5가 10위야.
새로운 모델에 대한 기대감과 함께 구매 비용이나 기술적 지원을 언급하는 가벼운 농담들이 주를 이룸.
GLM 5.1이 한동안 Opus 4.5 앞서지 않았나? 그러다 순위표 업데이트되니까 떡락하던데. 무슨 일 있었는지 아는 사람? 투표 조작이라도 한 거임?
평균적으로는 5.1이 Opus 4.5랑 비비는데 변동성이 좀 크네. Mimo v2.5는 1점 더 높긴 한데 변동성은 더 심함. 결국 Opus 4.5랑 GLM 5.1이 더 안정적이라는 거지.
이거 사람이 평가하는 거 아님? Mimo는 가중치 풀리면서 평가하는 사람 많아졌을 텐데, 안정적이라는 말이 맞나 싶음.
테스트는 블라인드 방식이라 사람들이 모델 뭔지 모름. Mimo는 신규 모델이라 평가 수가 적은 거임.
아 그렇네 인정.
좋은 지적임. 투표수 늘어나면 Opus 밑으로 떨어질 가능성이 높음. 항상 그래왔으니까.
인간 심리 때문이지. 사람들은 비싼 게 무조건 좋은 줄 알거든. 과학이나 llmarena처럼 블라인드 테스트하면 진실이 보이는 법임.
투표수가 10배는 적음. 아직 판단하기 이름.
Opus 4.5는 아직도 빡세게 테스트 중임? 요즘 기대치가 예전보다 높아져서 Mimo 점수가 더 좋아 보이는 듯.
다들 투표수 10배 적다는 건 무시하네. 데이터 쥐꼬리만큼 가지고 9위 찍은 거랑 확신을 가지고 9위 찍은 건 다르지. 축하하기 전에 일주일만 기다려보자.
더 좋든 아니든, 그냥 엄청나게, 엄청나게 좋네.
이제 gb200 두세 개만 있으면 되겠네.
이번 주에 침대 정리해서 엄마한테 용돈 받으면 바로 구매해야지!
착한 아이 점수 충분히 모았길 바란다.
NVIDIA가 에이전트 보안을 위한 오픈소스 샌드박스 'OpenShell'을 공개하며 업계 표준화를 주도하고 있습니다.
NVIDIA가 에이전트 보안을 위한 오픈소스 샌드박스 'OpenShell'을 공개하며 업계 표준화를 주도하고 있습니다.
일론 머스크가 공유한 AI 모델 순위표에서 Gemini가 하위권으로 평가받자 커뮤니티에서 논쟁이 벌어짐.
일론 머스크가 공유한 AI 모델 순위표에서 Gemini가 하위권으로 평가받자 커뮤니티에서 논쟁이 벌어짐.
