Arena에서 Gemini 4 Pro로 의심되는 모델을 발견했는데, 좀 이상하네요

아니... 난 아직 프로 체크포인트 구경도 못 해봤는데 🥲

모델이 뭔지 추측해서 평가하는 거야, 아니면 성능을 보고 평가하는 거야? 진짜로?

나도 아레나에서 Gemini 4 써봤는데, 결과물이 fable 5보다 낫더라.

너 지금 AI한테 hallucination 당한 거임.

그러니까 구글이 선택지를 제공하는 거고, 그 선택지들은 알 수 없는 다양한 이유로 결과값이 다를 수 있다는 거지.

출시는 개발자들이 결정할 때 이름을 붙이는 거야. 아마도 하나의 문제에 더 많은 에이전트가 작업하도록 허용했거나, 서로 다른 가중치를 가진 다양한 아키텍처를 테스트 중일 수도 있지.

하지만 미출시 버전을 소비자용으로 위장한다는 건 좀 너무 나간 것 같아. 그런 테스트는 내부적으로나 계약된 제3자를 통해 이루어질 테니까.

논리적으로 추측해 보자면, 네가 받은 개선된 답변이 새로운 모델을 의미한다고 보지는 않아. 네가 프롬프트를 더 잘 썼을 수도 있고, 아니면 단일 모델의 내부 작동 방식에 따라 달라질 수 있는 이유들이 있겠지.

수정: 아, 그럼 잠시 동안 다른 모델을 사용할 수 있었다는 거야? 지금은 없지? 라벨이 그렇게 붙어 있었는데 어떻게 그게 3.7 Flash가 아니라고 확신하는 거야? 😊

사람들이 Claude의 답변을 인터넷에 많이 공유했고, 구글이 네가 Claude를 좋아한다는 걸 알고 있어서 답변 형식을 네 입맛에 맞게 조정한 걸 수도 있지...

난 제한 없이 완전히 접속하는 방법 알고 있음. 50번씩 대화할 필요도 없고. 근데 여기서 공유하면 삭제될까 봐 말 못 함... 혹시 특정 결과 보고 싶으면 여기서 나한테 물어봐. 이미지나 링크 보내줄게.

그래서 그 방법이 정확히 뭔데?