내 LLM 앱에서 데이터를 수집하지 않는다는 걸 어떻게 증명할 수 있을까?
How do I prove that I don't collect data from my llm app?
핵심 요약
LLM 앱 사용자의 프라이버시를 보장하고 데이터 로깅을 하지 않음을 입증할 기술적 방법을 찾는 고민.
- 프라이버시 증명 — LLM 앱에서 사용자 프롬프트를 로깅하지 않음을 입증할 기술적 방법 모색
- 오픈소스 한계 — 코드 공개만으로는 서버 측 로깅 여부를 완벽히 증명하기 어려움
- 오프라인 구동 — 로컬 환경에서 완전히 오프라인으로 작동하는 것이 유일한 신뢰 근거
- 제로 트러스트 — 완벽한 증명은 불가능하며 결국 신뢰의 문제라는 의견이 지배적임
취미로 익명 LLM 채팅 앱을 만들고 있음. 사용자들이 내가 프롬프트를 로깅하지 않는다는 말을 그냥 믿게 하고 싶지 않음. 사용자가 직접 검증할 수 있게 만들고 싶음.
TEE(신뢰 실행 환경) 방식은 하드웨어 의존도가 너무 높고 자원이 부족해서 고려하기 힘듦.
레포지토리를 오픈소스화하는 것만으로 충분할지 모르겠음. 모델과 레포를 오픈소스화하고 해싱해서 변경되지 않았음을 보여주는 방식은 어떨까... 잘 모르겠음.
누군가 내 프롬프트를 로깅하지 않는다는 걸 실제로 납득하려면 뭐가 필요할까? 증명할 방법이 있긴 할까? (예를 들어 사람들은 왜 프로톤을 신뢰하는 걸까?)


