Unethically degrading models
Anthropic이 사용자 몰래 모델 성능을 임의로 저하시키고 있다는 의혹과 그에 대한 투명성 논란.
Anthropic이 제멋대로 모델 성능을 떨어뜨리는 건 정말 비윤리적임. 엔지니어로서 시스템이 가끔 고장 날 수 있다는 건 이해하지만, 최소한 사용자한테는 알려줘야지. 왜 이렇게 투명하지 못한 건지 도무지 이해가 안 감.
Anthropic의 모델 성능 저하 의혹에 대해 사용자들은 투명한 공지나 보상을 요구하며 불만을 표출하고 있음.
모델 성능을 일부러 떨어뜨려서 토큰 사용량 늘리려는 거 진짜 너무 티 난다.
지능 너프는 진짜 실화다.
성능 떨어질 때 통보받느니 차라리 할인이나 해줬으면 좋겠네.
실증적인 증거를 대봐.
법원 명령에 의한 증거 개시 없이는 어렵지. 확실히 구독 플랜에서 모델 품질이나 기간당 토큰 제공량에 일관성이 없는 느낌이 들어. AI 제공업체들이 유료 고객에게 명확한 공지 없이 조절할 수 있는 레버를 몇 개 가지고 있는 것 같은데, 특히 기업 환경에서는 이게 잘못된 것 같아.
생애 처음으로 2주 연속 리셋 3일 전에 주간 제한에 걸렸어. 물론 내 개인적인 경험일 뿐이지만, 뭔가 바뀐 게 확실하다고 확신함.
나도 똑같은 거 겪음. 지난 2달 동안 Pro x20 플랜 쓰면서 제한 걸린 적 한 번도 없었는데, 이번 주에만 벌써 두 번이나 걸림(계정 두 개 다).
어렵지, 당연히. 레딧의 브래드라는 사람을 엿먹이려고 코드를 몇 줄 수정하는 그런 게 아니잖아.
맞아, 하지만 '부하가 심할 때 양자화 수준을 조정해서 모델을 가볍게 만드는 대신 정확도를 희생한다' 같은 광범위한 건 인터뷰나 내부 정책 문서를 통해 밝혀낼 수 있겠지. 브래드라는 사람을 특정해서 괴롭힌다고 비난하는 건 아닐 거야.
뭐라고? 그게 바로 걔네가 하는 짓인데. 설마 A/B 테스트 안 한다고 생각하는 거야?
그럼 품질은 객관적인 게 아니라 주관적으로만 측정할 수 있다는 거야?
비결정적 워크플로우에서는 그렇지, ㅋㅋ. 심지어 새 모델이 얼마나 뛰어난지 보여주려고 쓰는 AI 벤치마크조차도 엄청나게 결함이 많아.
통계는 어쩌고?
통계에 따르면 Anthropic 포럼 사람들의 80%는 품질이 저하됐다고 생각하고 20%는 아니라고 생각함 😬 이제 네 차례야.
맞음, 그러니까 사용자들도 같이 퇴화하는 거지.
작성자가 저혈당 쇼크로 의식을 잃어갈 때 ChatGPT가 음성으로 계속 말을 걸어 깨워준 경험담입니다.
작성자가 저혈당 쇼크로 의식을 잃어갈 때 ChatGPT가 음성으로 계속 말을 걸어 깨워준 경험담입니다.
Claude Opus 5.5의 성능 저하 여부를 실시간으로 추적하는 오픈소스 벤치마크 도구 'LiveNerf'가 공개되어 큰 호응을 얻고 있습니다.
Claude Opus 5.5의 성능 저하 여부를 실시간으로 추적하는 오픈소스 벤치마크 도구 'LiveNerf'가 공개되어 큰 호응을 얻고 있습니다.