YapSketch — 에이전트에게 의도를 시각적으로 전달하는 도구
YapSketch — Show Your Agent What You Mean
핵심 요약
Claude Code와 같은 에이전트에게 음성과 화면 그리기를 통해 피드백을 효율적으로 전달하는 오픈소스 도구입니다.
- 시각적 피드백 — 화면에 직접 그리며 음성으로 설명하여 에이전트의 이해도를 높임
- OS 전역 지원 — 웹 브라우저에 국한되지 않고 운영체제 전체에서 사용 가능
- 로컬 처리 — 음성 인식은 기기 내에서 로컬로 수행되어 보안성 확보
- 무료 오픈소스 — 누구나 자유롭게 사용 가능하며 GitHub에서 프로젝트 확인 가능

안녕 얘들아!
Claude Code한테 내 피드백이랑 아이디어를 더 쉽게 전달하려고 YapSketch를 만들어봤어.
예전에는 앱 하나에 대고 말하고, 스크린샷 찍고, 또 다른 앱 열어서 그림 그리고, 그걸 다시 프롬프트에 다 설명하느라 개고생했거든. 이제는 그냥 단축키 누르고 말하면서 화면에 바로 그리면 돼. 녹음 멈추면 바로 Claude Code에 붙여넣기만 하면 끝이야. 그럼 에이전트가 내가 한 말은 물론이고, 내가 콕 집어서 가리킨 부분들까지 사진으로 다 알아먹음.
이거 쓰고 나서 Wisprflow는 아예 지워버렸고, 왔다 갔다 하는 번거로움도 확 줄었어. 녹음 한 번에 피드백을 엄청나게 때려 박아도 에이전트가 한 방에 다 알아듣거든.
100% 무료에 오픈 소스고, 음성 변환도 전부 로컬에서 돌아가니까 안심해.
Jev 써본 적 있으면 설정에서 연결도 가능해(Opper나 Openrouter로 로그인하거나 TypeSafe 키 추가). 그러면 내가 말한 내용이랑 의도를 그림이랑 매칭해서 각 포인트에 딱 맞는 프레임을 골라주니까 훨씬 똑똑해짐. 물론 연결 안 해도 쓰는 데 전혀 지장 없어.
앱이랑 영상 둘 다 Claude Opus 5.5 도움받아서 만들었어.
웹사이트: https://yapsketch.com/
깃허브: https://github.com/farouqaldori/yapsketch
앱 괜찮으면 깃허브 스타 좀 눌러주고, 다들 잘 써먹었으면 좋겠다!

