r/vibecoding•2개월 전•6•7
CI 파이프라인에서 자동화 테스트를 몇 개나 돌리시나요? B2B SaaS 팀들과 벤치마크를 비교해보고 싶습니다
How many automated tests does your CI pipeline run? I’m trying to benchmark mine against other B2B SaaS teams
핵심 요약
1인 창업자가 자신의 CI 파이프라인 테스트 개수가 적절한지 다른 팀들과 비교를 요청함.
- 테스트 개수 비교 — 1인 개발자가 17,800개의 자동화 테스트를 운영하며 타 팀과의 비교를 시도함
- 지표의 무의미함 — 테스트 개수는 팀 규모나 제품 복잡도에 따라 달라져 벤치마크로 적절하지 않다는 의견이 지배적임
- 품질의 척도 — 테스트 개수보다는 코드 커버리지와 회귀 테스트 방지 등 실질적인 목적이 중요함
- AI의 영향 — AI 도구 사용으로 인해 테스트 생성 속도가 빨라져 개수 비교가 더욱 어려워짐
저는 B2B SaaS 플랫폼을 만드는 1인 창업자인데, 제 CI 파이프라인이 다른 팀들과 비교했을 때 어느 정도 수준인지 전혀 감이 안 잡히더군요.
최근 GitHub Actions 실행 결과 17,800개의 자동화 테스트가 실행되었습니다.
검증을 받거나 자랑하려는 게 아닙니다. 혼자서 플랫폼을 구축하다 보니 비교할 기준이 전혀 없어서 그렇습니다.
혹시 공유해주실 수 있다면:
대략적으로 메인 CI 파이프라인에서 몇 개의 자동화 테스트를 실행하시나요?
엔지니어링 팀 규모는 어느 정도인가요?
어떤 유형의 SaaS를 만들고 계신가요?
예를 들면:
테스트 개수: ~17,800개
팀 규모: 1명
제품: 비즈니스 운영 / 컴플라이언스 플랫폼
이 수치가 일반적인지, 평균 이상인지, 아니면 극단적인 예외인지 궁금합니다.
