r/GeminiAI•18일 전•161•101논쟁
새로운 Gemini Pro 체크포인트
New Gemini Pro Checkpoint
핵심 요약
유출된 Gemini Pro 체크포인트의 성능과 ArenaAI에서의 확인 방법을 공유하는 글입니다.
- 체크포인트 유출 — Lyra가 유출한 새로운 Gemini Pro 모델이 ArenaAI에서 확인됨
- 성능 평가 — 이전 모델보다 월등하며 SVG 생성 등에서 뛰어난 결과물을 보여줌
- 출시 불확실성 — 내부 테스트 결과에 따라 정식 출시 여부나 시기가 결정될 예정
- 벤치마크 논쟁 — SVG 생성 능력이 모델의 지능을 평가하는 지표인지에 대해 의견이 갈림
이번 유출은 Lyra가 한 거임.
https://fixupx.com/lyraxana/status/2097839609086394600
트위터나 걔네 서버에서 찾을 수 있음. 걔 신뢰할 만한 유출러니까, 뭐 신뢰도 따위 관심 없어도 상관없고. 이 체크포인트는 ArenaAI에서 찾으면 됨.
내가 알기로는 3.8 flash로 위장돼 있을 거임. 무료긴 한데 랜덤으로 뜨는 거라, 3.8 flash(물론 배틀 모드)가 걸려도 이게 진짜 새 Pro 모델인지는 성능이 급이 다르게 잘 나오는지 확인해 봐야 알 수 있음.
(내가 체크포인트 더 구해서 새 글 올릴 예정) 내부적으로 이 체크포인트들(몇 개 더 있음) 결과가 좋으면 조만간 모델 공개할 거고, 결과 안 좋으면 공개 안 하거나 미루겠지.
이제 이 체크포인트 성능 얘기 좀 해보자면: 진짜 지림. 개좋음. 실수하는 거 하나도 못 봤고, 문장 흐름이 좀 더 자연스러웠으면 하는 아쉬움은 있는데 그거 빼면 깔 게 없음.
기억해 둘 Arena AI ID는 이거임. 01a06dfc-94a2-7abf-8d12-0878520062cb 이게 뜨면 그게 새 Pro 모델인 거다.
