시각장애가 있는 85세 숙모를 위한 로컬 AI 설정 도와주세요.
Help me set up local AI for my 85 year old aunt who is blind.
핵심 요약
시각장애가 있는 숙모의 창작 활동을 돕기 위해 로컬 AI 환경을 구축하려는 작성자에게 기술적 조언과 대안이 제시되었습니다.
- 로컬 AI 구축 — 개인정보 보호와 일관된 사용자 경험을 위해 오프라인 환경을 선호함
- 인터페이스 설계 — 시각장애인을 위한 음성 기반의 직관적인 상호작용 환경이 핵심임
- 기술적 대안 — 클라우드 기반 서비스의 편의성과 로컬 환경의 보안성 사이에서 논의됨
- 구현 도구 — Open WebUI, Kokoro TTS, Whisper 등 로컬 음성 제어 솔루션이 추천됨
똑똑한 형님들 안녕하세요. 최근에 은퇴하고 나서 제 능력 밖의 일을 하나 시작해 보려고 합니다.
세 줄 요약: 눈이 거의 안 보이는 85세 이모가 70년 넘게 써온 소설을 계속 쓰고 싶어 하십니다. 로컬 AI로 이걸 가능하게 만들고 싶은데, 어떤 순서로 접근해야 할지 조언 좀 부탁드립니다.
상세 내용
이모가 올해 85세인데 지금 저랑 같이 살고 계세요. 평생 150편 넘는 소설을 쓰셨는데, 주로 추리물이랑 서부 개척 시대 무법자 이야기예요. 황반변성 때문에 시력을 거의 잃으셨거든요. 다른 취미는 다 접으셨는데, 소설 쓰고 수정하는 것만큼은 포기를 못 하시네요. 요즘은 큰 화면에 고대비 설정까지 써도 글 쓰는 게 너무 힘들다고 그만둘까 고민 중이십니다.
이모랑 상의 끝에 AI 도구를 써보기로 했습니다. 그래서 RTX 5080(16GB VRAM), 32GB RAM 달린 데스크탑도 새로 맞췄고요.
이번 주말에 Unsloth 데스크탑 설치하고 Gemma4 모델부터 받아봤습니다.
근데 막상 해보려니 제가 너무 무지한 것 같네요.
지금까지는 그냥 온라인 모델에 프롬프트나 몇 번 날려본 게 전부거든요. 이렇게 바닥부터 직접 세팅해 보는 건 처음이라, 모델이랑 대화하기 전에 뭘 얼마나 준비해야 할지 감이 안 잡힙니다. 로컬 AI 돌리는 법에 대한 영상이나 글은 널렸는데, 뭘 믿어야 할지, 나한테 필요한 게 뭔지 도통 모르겠네요. 저 같은 초보를 위한 가이드 링크 하나만 던져주시면 진짜 감사하겠습니다.
제가 생각하는 활용 사례는 꽤 간단합니다:
-
이모랑 오직 음성으로만 대화하기.
-
항상 대기 상태로 이모의 말을 들을 준비 하기.
-
이모가 고른 자연스러운 목소리로 이모가 쓴 소설 읽어주기.
-
기존 소설 내용 질문에 답해서 설정 오류 방지하고, 예전 캐릭터들 다시 등장시키기. (지금은 이걸 손으로 메모하면서 하시는데 너무 힘들어하세요.)
-
요청하면 맞춤법이나 문법 같은 기술적 교정 제안하고, 모든 소설에서 일관성 유지하게 돕기.
-
요청하면 문체나 흐름 같은 스타일 교정 제안하고, 모든 소설에서 일관성 유지하게 돕기.
-
KDP 형식으로 출판할 수 있게 원고 정리하기 (이건 제가 이모 대신 해주려고요).
제가 생각한 접근 방식은 이렇습니다. 근데 Unsloth 기능을 좀 훑어보니까 빠진 게 너무 많은 것 같아서요.
-
모델이 항상 지켜야 할 지침 작성하기.
-
그 지침을 Unsloth의 Run Settings에 있는 시스템 프롬프트에 넣기.
-
마이크를 통해 이모가 모델이랑 대화하게 하기.
제 지침에는 이런 내용들이 들어갑니다.
-
이모에 대한 간략한 설명, 글쓰기 목표와 스타일.
-
작품 개요 (소설 종류 및 연관성).
-
기존 소설 파일 위치.
-
AI의 역할과 주요 업무 정의.
-
교정 시 따라야 할 상세 규칙.
근데 궁금한 게 너무 많네요:
-
이걸 하려면 Unsloth 프로젝트를 따로 만들어야 하나요?


