와, 벌써 500명이 넘는 분들이 TiboTattle로 Codex 사용량 제한을 추적하고 있네요! 지금까지의 발견들...

배경:

이 서브레딧에서 다들 봤겠지만, Codex 주간 제한에 대한 불신이 여전히 엄청나게 많고, 내 생각엔 그럴 만한 이유가 충분해. 다른 건 몰라도, 우리 같은 개인들은 데이터가 거의 없어서 OpenAI가 하는 말만 믿고 있어야 하니까.

TiboTattle은 로컬 Codex 세션 로그를 분석해 주는 macOS 메뉴 바 앱이야. 기능은 다음과 같아:

• 시간에 따른 할당량의 API 비용 환산 추적 - 내가 기업용으로 쓰는 백엔드 가격 엔진(npm runcost)을 그대로 사용함.

• 모델 변경, 추론 설정, 캐시 타임아웃으로 인해 캐시가 날아가는 시점 강조

• 커뮤니티 기여 기능 추가 - 진짜 힘은 우리가 통계를 모을 때 나오지. TiboTattle은 타임스탬프, 토큰 수, 할당량 퍼센트, 사용한 모델 같은 메타데이터를 선택적으로 공유할 수 있게 해줘.

요구 사항: macOS 14 이상(Apple Silicon), 로컬 세션이 있는 OpenAI Codex CLI 또는 데스크톱 앱. 윈도우랑 리눅스 버전은 며칠 내로 나올 예정.

시작하기: tibotattle.com에서 서명된 Mac 앱을 다운로드하거나 brew install --cask adamallcock/tap/tibotattle 명령어를 사용해.

소스 코드: 모든 소스 코드는 공개되어 있고 MIT 라이선스를 따라. 마음에 들면 깃허브 스타 하나씩 박아주라, 가시성 확보에 큰 도움이 돼! 버그 찾으면 이슈도 편하게 올려주고.

---

지금까지 알아낸 것들:

• Terra 비용: Terra는 예전의 더 비싼 가격으로 청구되고 있어. API나 Luna처럼 20% 할인 혜택을 못 받았거든. 이 부분은 내가 OpenAI에 직접 확인 중이야.

• 불확실한 비율: Terra랑 Luna가 API 비용에 비례해서 청구되고 있지 않을 가능성이 매우 높아. 하지만 이걸 확실히 하려면 커뮤니티 데이터 공유가 더 필요해.

• 캐시 킬러: 모델이나 추론 설정을 바꾸면 무조건 캐시가 날아가. 서브 에이전트나 사이드 챗도 마찬가지야. KV 캐시는 모델-추론 조합별로 계산되니까, Max에서 Ultra로 바꾸거나 그 반대인 경우를 제외하면 무조건 캐시가 꼬이게 돼 있어. TiboTattle에서 이런 비싼 사례들을 바로 확인할 수 있을 거야.

• 자동 검토(Auto Review) 소모량: 현재 내 API 환산 비용의 약 8%를 차지하고 있어(Terra보다 더 많이 나감!!). 캐시 적중률은 85% 정도인데, 다른 모델들이 96~98%인 거랑 비교하면 좀 낮지.

• 사이드 챗: 현재 모든 가격 추적 앱들이 사이드 챗은 제대로 못 보고 있어. 로그가 부분적으로만 남고, 그마저도 7일 지나면 삭제되거든. 사이드 챗 많이 쓰는 사람들은 이 앱들이 사용량을 실제보다 적게 잡을 거야. TiboTattle에서 조만간 해결할 예정이야.