여러분도 가끔 GPT-6.1-Sol 이해하기 어렵나요?
Do you guys also have trouble understanding GPT-6.1-Sol sometimes?
핵심 요약
GPT-6.1-Sol의 난해한 답변 방식과 맥락 부족으로 인한 소통의 어려움을 토로하는 개발자의 고민.
- 소통의 어려움 — GPT-6.1-Sol의 모호하고 맥락 없는 답변으로 인해 개발자가 추가 작업을 수행해야 함.
- 시스템 프롬프트 — 복잡한 주제를 지나치게 압축하려는 경향이 소통을 방해함.
- 모델 비교 — 이전 버전인 GPT-5/5.5보다 소통 방식이 퇴보했다는 평가가 지배적임.
- 대안 모색 — Claude Opus나 Gemini 모델 등 다른 모델의 소통 능력이 더 낫다는 의견이 제시됨.
나도 개발 짬 좀 먹었고 소프트웨어 솔루션만 수백 개는 만들어봤거든. 몇십 년째 돌아가는 것들도 있고. 그래서 뭐 웬만한 건 다 봤다고 생각했는데, 요즘 Astra의 GPT-6 시리즈, 특히 Sol이 말하는 꼬라지 때문에 아주 골치가 아프다. 이게 독일어(혹은 외국어 전반) 문제인지, 아니면 Codex 시스템 프롬프트 문제인지 잘 모르겠는데, ChatGPT Web(Business Premium 구독)에서 쓸 때는 GPT-6-Sol이 그나마 좀 알아먹을 만하단 말이지. 근데 우리가 만든 프로젝트에서 잠재적 회귀(regression) 같은 걸 설명할 때 보면 진짜 뭔 소린지 하나도 모르겠을 때가 많아.
가끔 이해 안 가서 다시 물어봐도 답변이 더 헷갈리게 나올 때가 있음. 항상 뭔가 핵심적인 디테일 두세 개가 쏙 빠진 느낌이라 상황 파악이 안 돼. 가끔은 얘가 뭔 말을 하려는 건지 대충 감은 잡히는데, 이 모델이랑 대화하고 있으면 진짜 기 빨려서 못 해먹겠다. GPT-5나 5.5 시절 생각해보면, 그때는 문제점 예측하는 능력은 지금보다 훨씬 떨어졌어도 대화하는 맛은 있었거든. 솔직히 말해서 지금 최상위 모델들도 보면 여전히 중요한 거 다 놓치거나 고려 안 하는 게 한두 번이 아님. 결국 뒷수습은 다 내 몫이지. 90%까지는 금방 가. 보통 30분이면 뚝딱인데, 그 뒤로 제대로 된 안정적인 솔루션 뽑아내려면 3~4시간은 계속 삽질해야 함.
나도 개선 좀 됐으면 하는 마음에 피드백 몇 번 보냈거든. 너희도 좀 보내라 :).
