Drawing a plane in 3D with limited set of tools
여러 LLM에게 제한된 브러시 도구만으로 3D 공간에 비행기를 그리게 한 실험 결과입니다.
여러 LLM한테 이 챌린지를 던져봤음. 3D 공간에 비행기를 그려보라는 건데, 조건은 딱 하나임. 색상, 크기, 경도(hardness)를 지정할 수 있는 브러시 툴 딱 하나만 써야 함. 그리고 툴 호출(tool call) 한 번으로 그림을 그리면서 동시에 특정 위치로 이동까지 시켜야 함.
LLM 모델별로 3D 비행기 그리기 성능 차이가 극명하게 드러나며, 특히 고가 모델의 우위와 DeepSeek의 불안정한 결과가 주목받음.
내 창의성 테스트에서는 Claude가 GPT보다 3D 위치 지정을 훨씬 매끄럽게 처리했음. 브러시 흐름에 대해 더 많이 고민한 느낌임. 이런 모델들이 롤플레잉에서 전체 장면을 생성할 때 어떻게 비교될지 궁금함.
모델을 비교할 거면 동급 모델끼리 비교해야 하지 않나?
Opus가 더 낫다고 하면서 Instant나 Flash랑 비교하는 건 진짜 어이없네 ㅋㅋㅋ
맞음, 동의함. 여기선 Opus 5랑 Sol 정도만 비빌 수 있음. DeepSeek은 V4 PRO를 썼어야지, 이건 차원이 다른 문제임. (Gemini는 뭐가 대응되는지 모르겠네)
Gemini는 지금 당장 대응할 만한 게 없음. 3.1 pro가 있긴 한데 업데이트 안 한 지 한참 됐거든. 3.7은 속도 면에서 여전히 엄청나네.
음, Opus 5가 품질도 가격도 더 우월함. Opus가 너무 자랑스러워!!
Gemini는 보잉기를 그렸음
와, 제일 비싼 모델이 성능 제일 좋네
DeepSeek가 뭔가 제대로 하는 듯하더니... 갑자기 에이, 귀찮아 이러네.
맞아, 근데 거의 1페니의 80% 정도를 그려냈네. 제대로 된 하네스(harness)가 있다면 이런 성능은 진짜 미친 수준이지.
작성자가 저혈당 쇼크로 의식을 잃어갈 때 ChatGPT가 음성으로 계속 말을 걸어 깨워준 경험담입니다.
작성자가 저혈당 쇼크로 의식을 잃어갈 때 ChatGPT가 음성으로 계속 말을 걸어 깨워준 경험담입니다.
Claude Opus 5.5를 활용해 이미지 파일 없이 코드만으로 포켓몬 레드 버전을 브라우저에서 플레이 가능하게 재구현한 프로젝트입니다.
Claude Opus 5.5를 활용해 이미지 파일 없이 코드만으로 포켓몬 레드 버전을 브라우저에서 플레이 가능하게 재구현한 프로젝트입니다.
Opus 5.5를 사용해 14만 줄 이상의 코드를 삭제한 스크린샷에 대해 사용자들은 구체적인 설명이 없다며 회의적인 반응을 보임.
Opus 5.5를 사용해 14만 줄 이상의 코드를 삭제한 스크린샷에 대해 사용자들은 구체적인 설명이 없다며 회의적인 반응을 보임.
