실시간으로 거짓말을 잡아내는 팩트체크 도구를 만들었습니다!

이 앱은 제가 Claude(주로 Opus 5)를 사용해 개발 중인 것으로, 시청 중인 영상의 팩트를 실시간으로 검증합니다. 로컬 전사 모델과 Claude API 키를 기반으로 작동하죠. 저는 이 알고리즘을 저렴하면서도 효과적으로 만들기 위해 엄청난 시간을 쏟았습니다. 아직 작업 중인 부분이긴 하지만, 현재 주장 하나당 약 0.02달러에서 0.05달러 수준까지 비용을 낮췄습니다! 확인해보고 싶으시다면 사이트는 de-bunked.com입니다.

저는 이 프로젝트를 시작할 때 먼저 실현 가능한지부터 확인했습니다. 처음에는 팩트체크를 위해 Haiku와 Sonnet을 돌렸는데, 주장 하나당 평균 비용이 약 0.125달러였죠. 일주일 정도 머리를 싸매고 고민한 끝에 비용을 대폭 낮출 수 있는 시스템을 고안해냈습니다! 그게 제 비결인데, 대략 이런 식입니다. 잠재적인 주장들은 검증 단계로 넘어가기 전에 엄격한 가이드라인을 거치고, 중요도에 따라 가중치가 부여된 뒤 신뢰할 수 있는 소스 데이터베이스와 대조됩니다. 만약 신뢰 수준이 낮으면 검증 결과가 편향 없이 최고 품질의 소스를 바탕으로 확신을 가질 때까지 소스 범위를 넓힙니다. 이게 핵심 요약인데, 개선하는 과정이 정말 재밌었고 아직도 진행 중입니다. 몇 가지 해결해야 할 문제들이 좀 남아있네요 :)