r/ClaudeAI•2일 전•426•51논쟁

Opus 5.5, 벤치마크 점수 상승

Opus 5.5 goes UP on Benchmaxxing Bench

핵심 요약

Opus 5.5의 벤치마크 성능 향상 소식과 함께 최근 모델 품질 저하를 둘러싼 사용자들의 의견이 엇갈리고 있습니다.

벤치마크 성능 — Opus 5.5가 벤치마크에서 높은 점수를 기록함.
품질 저하 논란 — 최근 모델 성능이 떨어졌다는 의견과 그렇지 않다는 의견이 대립함.
API 테스트 의혹 — 벤치마크 결과가 일반 사용자용이 아닌 API 환경에서 측정되었을 가능성이 제기됨.
모델 버전 비교 — 5.5 버전이 이전 버전과 차이가 없거나 오히려 퇴보했다는 비판이 존재함.

Opus 5.5 가중치 미쳤네, 진짜 개쩐다. 클로드 이 새끼 일 제대로 했네.

원문

커뮤니티 목록

r/ClaudeAI•2일 전•426•51논쟁

Opus 5.5, 벤치마크 점수 상승

Opus 5.5 goes UP on Benchmaxxing Bench

핵심 요약

Opus 5.5의 벤치마크 성능 향상 소식과 함께 최근 모델 품질 저하를 둘러싼 사용자들의 의견이 엇갈리고 있습니다.

벤치마크 성능 — Opus 5.5가 벤치마크에서 높은 점수를 기록함.
품질 저하 논란 — 최근 모델 성능이 떨어졌다는 의견과 그렇지 않다는 의견이 대립함.
API 테스트 의혹 — 벤치마크 결과가 일반 사용자용이 아닌 API 환경에서 측정되었을 가능성이 제기됨.
모델 버전 비교 — 5.5 버전이 이전 버전과 차이가 없거나 오히려 퇴보했다는 비판이 존재함.

Opus 5.5 가중치 미쳤네, 진짜 개쩐다. 클로드 이 새끼 일 제대로 했네.

주요 댓글

r/claudeai

Opus 5.5의 성능 향상에 대한 긍정적인 반응과 함께, 벤치마크 점수 조작 의혹 및 타 모델과의 성능 비교에 대한 논의가 이어지고 있습니다.

아르곤은 어디 갔음? 다들 오퍼스 품질 떨어졌다고 난리인데 이건 뭐임. 🤔

테스트는 분명 지난달에 오픈라우터 API를 통해 진행됐음. 적어도 그들의 웃긴 딥시크 4.1 플래시 허깅페이스 스타일 리워드 해킹 사건이 그걸 암시함. https://maxxbench.unlap.ai/research/coding-sandboxes/

Opus 5.5 가중치 미쳤다 진짜, 클로드 이 자식 대박이네

-5

Opus 5.5 가중치 미쳤네 진짜, 우리 클로드 폼 미쳤다

-8

품질 떨어진 거 맞음. 이건 논쟁의 여지가 없음. 엄청 불안정함.

-12

벤치마크니까 아마 API일 듯. 우리 같은 일반 유저는 구독 버전에서 양자화된 거 쓰겠지.

앤스로픽에서 명확하게 아니라고 부인했음.

구글이 3.8 플래시 벤치마크 점수 뻥튀기해놓고, 우리가 모델 써보면 모를 줄 알았다는 게 어이가 없네.

이거 여기 두고 감: https://llemre.com/benchmaxxing/

새로운 Opus가 대략 60일마다 나오네. 5.6이나 뭐 그런 거 조용히 테스트하는 걸 수도 있고.

흥미롭네. 왜 OpenAI만 유일하게 benchmaxxing이랑 반대로 가는 거지? 대부분은 평균이나 중앙값이 0 근처에 있고 긴 막대들이 좀 있는데. Gemini는 오른쪽으로 멀리 가서 benchmaxxing을 엄청나게 하고, OpenAI는 왼쪽으로 살짝 치우쳐서 anti-benchmaxxing을 엄청나게 하네.

다들 Opus가 퇴보했다고 난리인데, 정작 'Benchmaxxing Bench'라는 이름의 차트에서는 Opus 5.5가 올라가고 있네. 난 그냥 이 차트를 믿기로 했다.

그것뿐만이 아님:

https://github.com/ninjahawk/livenerf

무료 웹 버전의 5.6 솔이 최고였음. 진짜 좋은 모델이었고, 뭔가 '그 느낌'이 있었음. 결과물이 딱 맞았거든.

원문r/ClaudeAI