Astra가 갑자기 블렌더에서 엉망이 됐다고? 대규모 너프인가? 해결 방법 없을까?

Astra가 오늘 갑자기 모든 면에서 엉망이 됐어. 일주일 동안 엄청나게 써왔는데, 오늘 다 망가졌어. 갑자기 엄청 멍청해졌다고.

아마 그냥 음모론이겠지만, 네 글을 보니 내 관찰이 확실히 맞았다는 생각이 드네.

Tibo가 마지막으로 리셋한 이후로 끔찍한 경험을 하고 있어. 계속 횡설수설하고, hallucination을 일으키고, 추론 능력도 엉망이야. 내가 본 적 없을 정도로 많은 사람이 이 문제에 대해 글을 올리고 있어. 가끔 횡설수설하는 반응을 본 적은 있지만, 이렇게 광범위한 건 처음이야.

질문을 엄청나게 수정하고 나서야 결국 맞는 답을 내놓긴 하지만, 복잡하고 장기적인 작업에서는 모델이 워낙 멍청해져서 제대로 수정할 수가 없어.

Quantization이지. 돈 내고 서비스를 쓰는데 자기들 마음대로 성능 훨씬 구린 버전을 던져주는 게 말이 되냐? 사실 말이 안 된다는 표현은 약하지. 사기라고 하는 게 맞다.

이제 너프 여부를 실제로 판단할 수 있는 아주 시각적인 방법이 생겨서 다행이야. 이전에는 그냥 '느낌'에 의존했었잖아.

누군가 블렌더 너프 지수를 만들어서 커뮤니티가 기여할 수 있게 해야 해. A/B 테스트 중인지 뭔지 확인하게.

나도 지난 며칠 동안 Astra가 지시 사항을 따르는 능력이 눈에 띄게 나빠진 걸 느꼈어. 내 AGENTS.md에는 메인 브랜치를 직접 수정하지 말라고 명시되어 있는데, 계속 그걸 어기고 있어.

왜 그러냐고 물어보면, 작업을 수행하라는 내 요청을 메인 브랜치를 수정해도 된다는 허가로 해석했다고 하더라고. 내가 명시적으로 금지한 작업을 평범한 작업 요청으로 간주해버리니 믿고 일을 맡기기가 어려워.