Gemini 헤비 유저로서 Claude를 써보고 크게 실망했다
핵심 요약
Gemini의 잦은 환각과 자신감 넘치는 거짓 답변에 지친 사용자가 Claude의 정직함에 만족하며 갈아타려는 상황.
- Gemini 환각 문제 — 시스템 프롬프트로 제어하려 해도 2024년 정보에 갇히거나 거짓 답변을 자신 있게 내놓음.
- Claude의 정직함 — 모르는 질문에 대해 모른다고 명확히 답변하며, 사용자의 검증 결과 사실로 확인됨.
- 프롬프트 엔지니어링 논쟁 — 프롬프트로 환각을 완전히 막을 수 없다는 의견과 프롬프트 실력 부족이라는 의견이 대립함.
- 모델 활용 전략 — Gemini로 깊이 있는 조사를 수행하고 Claude로 검증하는 하이브리드 방식이 효과적이라는 의견 제시.
Gemini의 Instructions에 환각을 일으키지 말라고 수많은 마스터 프롬프트/시스템 프롬프트를 설정해 봤지만, 아무것도 소용없었습니다. Gemini는 종종 아직 2024년이라고 생각하고, 제가 묻는 뉴스를 미래에 대한 허구라고 생각합니다. 수많은 시행착오 끝에 질문에 답하기 전에 항상 현재 날짜를 확인하라고 지시했더니, 그제야 2024년에 대한 언급이 줄어들었습니다.
그다음으로 정말 시간을 많이 낭비하게 만드는 점은, 답을 모를 때 항상 자신감 넘치게 가짜 답변을 내놓는다는 것입니다. 다시 확인해 보라고 하면 사과하고는 또 다른 가짜 답변을 줍니다. 계속해서 반복되죠.
그래서 Claude에게 같은 질문을 해봤더니, 이리저리 검색해 본 뒤에 모른다고 답하더군요. 그다음 제가 직접 조사해 본 결과, 일반적인 검색으로는 답을 알 수 없다는 Claude의 말이 맞았습니다.
앞으로는 Claude를 더 많이 사용할 생각입니다.
여러분은 어떻게 생각하시나요?


