솔직한 의견: Opus 5는 나쁘지 않음… 모든 걸 재작성하고 나면 말이지

코드 밖에서도 Opus 5는 환각이 너무 심함. 비교적 잘 알려진 밴드(Sonata Arctica)에 대해 질문해 봤는데, 존재하지도 않는 밴드의 커버 곡이라고 자신 있게 환각을 일으키는 걸 보고 GPT-4 시대로 돌아간 줄 알았음.

그래, 나도 알지만 환각 비율이 확실히 줄어들고 있었는데 이건 큰 퇴보처럼 느껴졌거든. 게다가 '이 라이브러리는 이렇게 작동해' 같은 건 사실 정보니까 모델이 그걸 유지할 수 있느냐는 중요한 문제지.

설마 코드 베이스 전체를 재작성하라는 건 아니겠지? 말투가 좀 그렇게 들려서 말이야...

개발자들 사이에서 '스택'은 보통 언어 선택, 프레임워크, 라이브러리, 클라우드 플랫폼, 데이터베이스 등을 의미하거든.

Opus 5를 선동가/그림자/공격자 역할로 활용하면 우리 설정에서 가장 효과적인 에이전트가 됨. 우리는 얘가 하는 말에 신경 쓰는 걸 멈추고, 크고 복잡한 컴포넌트를 구축할 때 멀티 에이전트 오케스트레이션의 최종 결과물을 보기 시작했음. 그냥 모든 걸 다 털어내 버리거든.

단일 코더로 쓰기엔 결과물이 끔찍해서 최악의 경험임.

수정: Opus 5는 '지침 따위 무시해'라는 기조로 만들어져서, 만약 네가... 하려고 하면 실제로 너한테 불리하게 작용할 수 있음(Anthropic 가이드에 자세히 설명되어 있음).

더 자세히 말해줄 수 있음? 난 항상 Opus를 멀티 에이전트 오케스트레이터로 쓰고 에이전트들은 Opus와 Sonnet을 섞어서 썼는데, Opus 5로 넘어오면서 그냥 Fable을 오케스트레이터로 바꾸고 하위 에이전트들을 Sonnet 5로 돌렸거든. 출력 토큰 대부분이 Sonnet 워커를 거치니까 비용 차이도 별로 안 크고.