I gave Terra 6.1 a try...
Terra 6.1 모델의 잦은 작업 중단 현상에 대한 사용자들의 불만과 원인 분석이 이어지고 있습니다.
Codex 1년 쓰면서 이런 일은 처음 겪네. 혹시 나 말고 또 이런 경험 한 사람 있음? 말할 것도 없이 당분간은 그냥 Sol/Luna나 써야겠다...
사용자들은 모델이 작업을 중단하는 현상에 대해 불만을 표하며, 설정값 문제나 모델 자체의 지능 저하 등 다양한 원인을 추측하고 있습니다.
이전 모델에서도 가끔 발생하던 일임.
진짜 개빡침
Sol이랑 Astra도 맨날 이럼. 그냥 작업을 수행하는 대신 멍청한 이유나 변명을 대면서 멈춰버림.
중간에 질문하면 그냥 멈추고 하던 작업을 안 이어가더라. Claude는 질문하면 대답하고 나서 하던 거 계속하는데.
Terra만큼 자주나 빠르게 그러지는 않음.
슬프게도 나도 똑같은 경험을 했음.
맞음. 작업을 끝낼 자신이 없으면 거부하는데, 이건 좋은 기능일 수도 있음. 노력 수준을 높이거나 더 똑똑한 모델을 쓰면 됨. 난 이게 좋다고 봄. 잘못된 해결책으로 계속 나아가는 것보다, 스스로 평가해서 시간을 아껴주는 거니까. 난 Luna 5.6이 30분 동안 잘못된 해결책으로 삽질하는 걸 본 적도 있음.
(꽤 간단하고 직관적인) 작업을 완료한 뒤에, 왜 처음에 멈췄냐고 물어봤음. 답변은 이거임:
"작업 브리핑의 크기와 남은 응답 예산에 대한 우려를 작업 종료의 이유로 잘못 판단해서 멈췄습니다. 필요한 작업을 계속하기보다 부분적인 진행 상황을 보고하기로 선택했습니다."
사람들이 여기 올린 사고 과정(thinking traces)이랑 관련이 있는 것 같음. 예를 들면 "이 작업을 끝내려면 <#> 토큰이 남았으니 효율적으로 일해야 해!" 같은 거.
작업 완료까지 6분 걸렸고 모든 결정은 이미 내려진 상태였는데, 좀 미친 행동이지.
참고로, "왜"라는 질문에 대한 답변은 항상 즉석에서 생성되는 거고, 실제로 어떤 문제가 발생해서 그런 행동을 했는지에 대한 반영은 전혀 없음.
내 벤치마크 확인해봐: https://www.reddit.com/r/codex/s/7774I834zn
[이미지]
테스트 중 하나를 Terra high로 설정했는데, 1분 22초 만에 거부하더라. 근데 Max reasoning으로는 문제를 풀 수 있었고, Sol 6.1 medium보다 더 최적화된 솔루션을 거의 비슷한 시간 내에(Sol은 25분, Terra는 32분) 내놓기도 했음.
아 진짜 다들 왜 이래. 이거 채팅창에서 대화용으로 쓰는 모델이 아님. 이 모델은 코디네이터랑 잘 정의된 작업들이 포함된 더 큰 워크플로우에서 사용하려고 만든 게 분명함.
동의 안 함. 이 모델은 자신이 자신감 있는지, 혹은 자기 능력의 한계를 아는지 알 수 없음. 내가 정확히 어떻게 하는지 알려주기 전까지는 불가능하다고 "자신 있게" 말한 적도 있음. 수학적 의미에서 증명할 수 없다는 이유로 정의 작성을 거부한 적도 있는데, 정의라는 것 자체가 무언가를 정의하려고 존재하는 거잖아.
이건 LLM을 주제에 대한 이해도가 있는 사람처럼 대하지 않고는 상호작용하지 못하는 사람들을 위한 어설픈 임시방편일 뿐임.
Luna는 원래 대단했음. 요즘은 git 사용을 거부하고 포기해버림. 왜냐면 권한 상승을 요청해야 하는데, 예전에는 자동으로 하던 걸 지금은 안 함. Sol은 지금 자동으로 하고 있고. 이건 한 가지 예시일 뿐이고, 내가 밀어붙이기 전까지는 자주 포기하고 못 한다고 주장함. 그러고 나면 OP 스크린샷에 나온 것처럼 말하는 거지.
난 이게 확신이 없어서 그런 거라고 생각 안 함. Luna가 뇌엽절제술을 받은 것 같음.
Luna 5.6 써봐, 아직 사용 가능함.
말도 안 되는 억지네
자신 있게 틀린 답을 내놓는 것보다는 낫지 않음?
사용 제한 상향 조치에 대해 사용자들은 과거 너프를 되돌리는 것일 뿐이라며 냉소적인 반응을 보이고 있습니다.
사용 제한 상향 조치에 대해 사용자들은 과거 너프를 되돌리는 것일 뿐이라며 냉소적인 반응을 보이고 있습니다.
AI 모델의 성능이 좋아져도 여전히 프롬프트의 질이 결과물을 결정한다는 의견과, 이제는 기술보다 상상력이 중요하다는 의견이 대립합니다.
AI 모델의 성능이 좋아져도 여전히 프롬프트의 질이 결과물을 결정한다는 의견과, 이제는 기술보다 상상력이 중요하다는 의견이 대립합니다.
Claude가 Windows 프로세스에 직접 접근해 동적 후킹을 수행할 수 있게 해주는 오픈소스 MCP 서버 'Exoproc'을 소개합니다.
Claude가 Windows 프로세스에 직접 접근해 동적 후킹을 수행할 수 있게 해주는 오픈소스 MCP 서버 'Exoproc'을 소개합니다.