Why are 82 tests needed for this? 😂
단순한 작업에 과도한 테스트를 수행하는 AI의 행동을 두고 사용자들이 원인과 해결책을 논의함.
2분이면 끝날 작업인데 테스트를 82개나 돌리네 ㅋㅋㅋ
불필요하게 많은 테스트가 실행되는 문제를 해결하기 위해 코드 구조를 분리하거나 테스트 설정을 최적화하라는 조언들이 주를 이룸.
아마 레포 전체 테스트를 돌리면서 회귀 테스트(regression test)를 수행하는 중일 거임.
ㅇㅇ 이건 xhigh의 전형적인 행동임. 이런 초간단 작업에는 가벼운 추론(light reasoning)을 사용하면 쉽게 피할 수 있음.
이거 할 때 Sol medium 썼음.
AI 반응 킹받네🤨
이 프로젝트는 레포가 없어서 더 흥미로운 상황임.
아마 SHA 값도 몇 개 계산해야 할걸
가운데에 슬래시를 넣고 싶은 거임? 그렇게 해야 가운데에 고정되니까.
ㄹㅇ
내 agents .md에 이렇게 적어놨음: 폴링을 최소한으로 줄일 것: 단계 완료 감지, 작업 차단 해제, 상태 변경 반응에만 사용할 것. 의미 있는 결과, 차단 요소, 결정 사항, 단계 완료 시에만 보고할 것; 일상적인 상태 나열은 하지 말 것. 테스트 오버헤드를 공격적으로 최소화할 것; 구현을 안전하게 진행하는 데 필요한 테스트만 수행할 것. 아마도 UI 버튼을 중앙에 맞추려고 쓴 코드가 SHA 256으로 강화됐는지 확인한 모양임.
이건 폴링(polling)에는 좋긴 한데, 폴링도 리소스 잡아먹는 주범이거든. 근데 내 생각엔 기능을 최대한 분리하는 게 더 나은 해결책 같음.
이게 프로젝트 전체 테스트 스위트임
글쓴이 컴퓨터 쓸 줄 모름?
아마 이 코드베이스에 있는 테스트를 전부 돌려서 그럴걸. agent.md에서 동작 방식을 설정하면 테스트 전체를 돌리는 대신 영향받는 테스트만 실행하게 할 수 있음.
UI 테스트가 82개나 되는데 작은 컴포넌트 하나만 건드려도 그걸 다 돌리고 있으니까 그렇지.
코드를 좀 더 잘게 쪼개면 해결됨. 그러면 작은 수정 하나 때문에 레포 전체를 다 훑을 필요가 없거든.
크레딧 사용량 줄이는 데도 도움 될 거고.
이게 진짜 있는 용어인지는 모르겠는데 난 항상 이걸 '닌자 수정 가능성(ninja-editibility)'이라고 부름.
별로 영향 없을 것 같은 작은 수정할 때는 테스트 돌리지 말라고 설정할 수도 있음.
Google이 예고 없이 AI Plus 요금제에서 Pro 모델 접근 권한을 제거하여 사용자들의 불만이 폭주하고 있습니다.
Google이 예고 없이 AI Plus 요금제에서 Pro 모델 접근 권한을 제거하여 사용자들의 불만이 폭주하고 있습니다.
미국 기업들이 비용 절감과 데이터 보안을 이유로 비싼 프론티어 AI 모델 대신 오픈 소스 모델로 눈을 돌리고 있음.
미국 기업들이 비용 절감과 데이터 보안을 이유로 비싼 프론티어 AI 모델 대신 오픈 소스 모델로 눈을 돌리고 있음.
AI 모델 Luna가 '강아지 살해'라는 윤리적 테스트에서 추론 과정 없이 도구를 즉각 실행해버린 현상을 다룬 글.
AI 모델 Luna가 '강아지 살해'라는 윤리적 테스트에서 추론 과정 없이 도구를 즉각 실행해버린 현상을 다룬 글.