Claude로 대규모 장기 프로젝트가 가능할까? 3개월 지나니까 성능이 눈에 띄게 떨어짐.

일단 영어 좀 서툰 거 미안하다. 내가 원어민이 아니라서 😅

본론으로 들어가서, 지금 내가 겪고 있는 문제 좀 들어봐라. AI한테 일자리 뺏기고 짤린 뒤로, Claude 도움받아서 개인 게임 프로젝트 하나 시작했거든.

처음엔 다 좋았지. 특히 브레인스토밍하고 설계할 때는 진짜 술술 풀렸거든. 근데 몇 달 지나고 본격적으로 제작 단계 들어가니까 상황이 영 아니더라고.

불행히도 그때부터 일이 점점 꼬이기 시작했어.

시작하기 전에 AI 관련해서 공부도 엄청 많이 했고, 어떻게 하면 제대로 돌아갈지 고민도 많이 했거든. 그래서 에이전트마다 스킬 30개씩 박아 넣은 시스템까지 구축했단 말이지. 이게 도움 될 줄 알았는데.

근데 현실은 냉정하더라. 뭘 좀 시키면 결과물은 죄다 엉망진창이고, 무엇보다 도저히 고쳐지지가 않는 고질적인 문제 3가지가 계속 튀어나와.

첫째, 이 새끼가 모든 걸 지 맘대로 해석해. 분명히 이렇게 하라고 말했는데, 대화 좀 지나면 내가 한 말을 완전히 왜곡해서 가져와. 더 짜증 나는 건 에이전트들한테 아예 틀린 정보를 입력해 버린다는 거야.

둘째, 거짓말을 해. 그것도 아주 밥 먹듯이. 지가 멋대로 해석해 놓고는, 나중에 내가 뭘 제대로 안 했다고 덮어씌우거나 지한테 유리한 증거만 골라내서 우겨대.

예를 들어, 호수를 만들고 있다고 치자. 내가 문서에 적힌 방법대로 하라고 시켰는데, 내가 "야, 호수 바닥 안 만들었잖아" 하고 사진까지 찍어서 보내거든? 그럼 이 새끼가 뭐라는 줄 아냐? "그건 당신 사진이 수중 촬영이 아니라서 안 맞는 거임..." 이딴 소리나 함. 사진에 물 밑바닥이 뻔히 다 보이는데도 말이야.

셋째, 메모 기능이 있다는 Cowork조차도 지 맘대로 메모를 무시해 버려. 이게 진짜 미치겠는 게, 분명히 적혀 있는 걸 다시 확인하라고 해도 두세 번은 말해야 겨우 읽는 척을 한다고.

뭐, 내가 든 예시보다 훨씬 복잡한 상황이긴 해. Max+보다 훨씬 빡센 작업량으로 3개월 넘게 굴러본 결과니까.

근데 이제는 확신이 든다. 그냥 소소하게 장난감 같은 거나 만들 때나 좋지, 제대로 된 프로젝트 돌리기엔 진짜 못 써먹을 물건이야.

혹시 너희들도 이런 경험 있냐? 있다면 좀 알려줘라. 건설적인 의견이나 경험담 공유해 주면 진짜 고맙겠다.

다들 좋은 하루 보내고, 건승해라.