Fable 5.2 just landed.
Anthropic의 새로운 모델 Fable 5.2가 출시되었으며, 사용자들은 모델 성능과 리셋 정책에 대해 논의 중입니다.
앤스로픽 뉴스룸엔 여전히 아무 소식도 없네.
수정: 농담이었음, 드디어 올라왔다:
https://www.anthropic.com/claude-fable-and-mythos-5-2
수정 2: 미친, 나 *three*번 리셋됨. 보니까 Fable 미터 때문에 그런 듯.
사용자들은 새로운 모델의 성능과 리셋 정책에 대해 토론하며, 특히 Max 설정의 효율성과 Anthropic의 버전 관리 전략에 대해 다양한 추측을 내놓고 있습니다.
누가 이 그래프 좀 설명해 줄 사람?
Fable Xhigh에서 Max로 올렸는데, 더 오래 생각하고 비용도 더 드는데... 성능은 더 떨어진다고?
응. 많은 벤치마크에서 그런 행동이 나타나지만, 전부 다 그런 건 아님. 그러니까 일반적으로 Max를 쓸 때는 테스트 용도거나, 직접 벤치마크를 돌려본 목적이 있을 때 써야 함. 더 나은 성능을 보장하는 게 아니니까.
그거 사실 꽤 흔한 현상임.
가장 진보된 모델들은 모두 Max effort에서 과도하게 생각하는(overthinking) 징후를 보임. Fable이 그 점으로 유명하지만, Opus 5.5도 어느 정도는 그런 모습을 보임. 일반적으로는 작업에 맞춰 모델의 노력을 최적화해야 함.
과도하게 생각한다고?
저 그래프에서 탄소(carbon)는 대체 왜 저러는 거임
그냥 제미나이(Gemini)가 하는 짓이지 뭐
색맹이라 저 그래프는 그냥 점이랑 선으로만 보이네. 분명 통찰력 있는 내용이 담겨 있긴 하겠지.
로그 스케일 말고 실제 스케일로 가져옴
왜 5.5가 아닌지 설명해 줄 사람?
ChatGPT가 큰 거 하나 터뜨리면 바로 밟아버리려고 기다리는 중임. 근데 챗GPT가 못 하니까, 얘네도 안 하는 거지.
“Fable 모델이 포함된 요금제와 좌석은 구독 기간에 따라 1~3회의 Fable 리셋을 제공함”
불만은 없는데 3회 리셋이라니 충격적이네. Anthropic이 언제부터 이렇게 관대했지???
수정: 다시 읽어보니까 Fable 사용량에만 적용되는 거 같네. 없는 것보단 낫지만 솔직히 좀 별로임. 그냥 일반적인 리셋이어야지. 이번 주 사용량 다 썼으면 Fable 리셋해봐야 아무 소용 없잖아.
마이너 버전이 새로 나오면 +1이 되는 거임.
네 모델은 완전히 독립적이라 Opus 5.5가 있다고 해서 Fable 5.5가 있어야 할 이유는 없음.
그리고 얘네는 기존 모델을 계속 패치하면서 마이너 버전을 언제 발표할지 대충 정하는 거임. 대부분 며칠 동안 사람들 입에 오르내리게 하려고 그러거나, 현재 모델 코드랑 호환되지 않는 뭔가를 하고 싶을 때 그러는 거지.
5도 사실 지어낸 버전임. 그냥 Fable 1이야.
음모론 하나 던져봄? 얘네가 지난 며칠/몇 주 동안 테스트하던 것보다 더 이전 체크포인트를 공개해서, OAI가 Astra 6.2랑 Sol 6.2를 출시하게끔 미끼를 던진 거 아님?
Fable 5.2가 Astra 6.2보다 구리면 -> 5.5 출시
Fable 5.2가 Astra 6.2보다 좋거나 비슷하면 -> 5.5는 나중을 위해 아껴둠
Fable 사용으로 소모된 주간 사용량도 같이 리셋되는 거라, 여전히 꽤 관대한 편임.
47일간의 독립적인 벤치마크 결과, Opus 5.5에서 유의미한 성능 저하는 발견되지 않았습니다.
47일간의 독립적인 벤치마크 결과, Opus 5.5에서 유의미한 성능 저하는 발견되지 않았습니다.
슈퍼마켓 와인 코너에서 ChatGPT로 와인을 추천받는 실용적인 활용 사례가 공유되었습니다.
슈퍼마켓 와인 코너에서 ChatGPT로 와인을 추천받는 실용적인 활용 사례가 공유되었습니다.
최근 Opus 5.5의 성능 저하와 토큰 낭비 문제로 사용자들의 불만이 폭주하고 있습니다.
최근 Opus 5.5의 성능 저하와 토큰 낭비 문제로 사용자들의 불만이 폭주하고 있습니다.