새로운 LLM 벤치마크 'CatBench' 등장
New LLM Benchmark "CatBench"
핵심 요약
LLM 검열을 우회하기 위해 고양이 사진을 활용한 새로운 벤치마크 'CatBench'가 공개되었습니다.
- CatBench 공개 — 기존 벤치마크의 검열 문제를 해결하기 위해 고양이 사진을 활용한 대안이 출시됨
- 벤치마크 목적 — LLM이 생성하는 콘텐츠의 안전성 및 성능을 테스트하기 위한 새로운 도구임
AssBench: https://assbench.com 본 사람들도 있을 거다.
일부 LLM이 "음란하다"고 지랄하면서 콘텐츠 만드는 데 자꾸 문제가 생겨서, 더 안전하고 말랑말랑한 대안을 하나 발표한다: https://catbench.noip.ws
프롬프트
턱시도 고양이 3D 모델을 단일 HTML 파일로 만들어서 인터랙티브하게 구현해라.
- HTML 파일 하나에 모든 걸 때려 박아라. 빌드 과정 필요 없음. 크롬에서 파일 열었을 때 바로 작동해야 함.
- Three.js랑 공식 애드온은 cdnjs.cloudflare.com이나 cdn.jsdelivr.net에서 불러와라. 버전 딱 고정하고. 다른 외부 리소스는 절대 금지: 이미지, 텍스처, 모델, 폰트 다 쓰지 마라. 모든 지오메트리와 머티리얼은 프로시저럴 방식으로 구현할 것.
- 해부학적 구조. 고양이 전체를 하나의 연속적이고 해부학적으로 정확한 성체 단모종으로 모델링해라: 둥근 머리에 짧은 주둥이, 얇은 가장자리와 귓속 디테일이 살아있는 쫑긋한 삼각형 귀 두 개, 아몬드형 눈, 작은 코, 수염 패드, 목, 가슴, 등, 배, 엉덩이, 가늘어지는 긴 꼬리, 그리고 발바닥과 발가락 패드가 보이는 다리 네 개. 다리가 뭉뚱그려져서 하나처럼 보이면 안 된다. 비율은 실제 성체 고양이랑 똑같이 맞춰라.
- 턱시도 코트. 기본은 검은색 털에 클래식한 흰색 패턴: 가슴 턱받이, 턱이랑 주둥이 아래, 배, 그리고 흰색 발("양말"). 패턴 경계는 기하학적이지 않고 부드럽고 약간 불규칙해야 함. 코는 분홍색이나 어두운 가죽 느낌, 발바닥 패드는 분홍색, 눈은 세로 동공이 있는 황록색, 각막에 맺힌 촉촉한 하이라이트, 그리고 가느다란 흰 수염까지 구현해라.
- 어느 각도에서 봐도 리얼해야 한다. 사용자가 고양이 주위를 돌려볼 거니까 앞면(얼굴, 턱받이, 앞발), 옆면, 뒷면(등뼈, 엉덩이, 꼬리 시작점) 전부 다 그럴싸한 모양이 나와야 함. 어느 한쪽이라도 뭉개져 보이거나 대칭 복사한 것처럼 보이면 안 된다.
- 진짜 털처럼 보여야 함: 몸 방향을 따라가는 빽빽한 단모, 검은 털의 부드러운 광택, 흰 부분의 솜털 느낌, 플라스틱 같은 번들거림은 절대 금지. 셸 렌더링이나 인스턴스드 스트랜드, 아니면 그에 준하는 프로시저럴 기법을 써라. 부드러운 그림자가 들어간 리얼한 조명. 기본 자세: 앞발을 꼬리로 감싸고 꼿꼿하게 앉아 있는 모습.
- 미세한 생동감: 천천히 쉬는 숨, 가끔 깜빡이는 눈, 귀가 쫑긋거리는 거, 꼬리 끝이 살랑거리는 거.
- 인터랙션: 드래그하면 고양이 주위를 회전. 줌은 없음. 모델을 클릭하거나 터치하면 찌를 수 있게 해라: 찌른 부위의 털이랑 몸이 푹신한 몸 위로 부드러운 털이 덮인 것처럼 댐핑 스프링 효과를 줘서 흔들리게 해라. 머리를 찌르면 귀를 쫑긋거리고 눈을 깜빡여야 함. 꼬리를 찌르면 꼬리를 살랑거려라.
- 임베드 가능한 컴포넌트. 다른 페이지의 400 x 400 픽셀 컨테이너 안에 들어갈 거다. 컨트롤 패널, 슬라이더, 텍스트, 제목, 설명 같은 거 다 빼라. 그냥 컨테이너를 꽉 채우는 캔버스만 있으면 됨. 최적의 기본값(털, 눈 색깔, 조명, 카메라 프레이밍, 부드러움)은 이미 적용되어 있어야 한다. 귀 끝이랑 꼬리까지 포함해서 고양이가 화면에 꽉 차고 중앙에 와야 함. 컨테이너 크기 바뀌면 같이 리사이즈되게 해라.
- 60fps 부드럽게 유지하고, 콘솔 에러는 하나도 없어야 함.
- 완성된 상태로 제출해라. 플레이스홀더나 TODO 같은 거 남기지 마라.
이 HTML 파일 하나만 가지고 작업해라. 프로젝트 내의 다른 파일은 읽지도, 검색하지도, 수정하지도 마라. 시간은 2시간 준다. 절대적인 제한은 아니니까 퀄리티를 위해서라면 50% 정도 더 써서 최대 3시간까지는 봐준다. 결과물은 직접 테스트하고 개선해라: Playwright로 400 x 400 사이즈에서 파일을 열고, 앞/뒤/옆/위에서 스크린샷 찍어보고, 콘솔 확인하고, 모든 각도가 최대한 리얼해 보일 때까지 반복해라. 최종 HTML 파일을 제출해라.



