이제 Codex와 함께 유튜브를 보며 실시간으로 대화하고 영상을 일시 정지해 설명을 들을 수 있습니다

OpenAI의 WebMCP 챌린지 때문에 이거 한번 만들어 봤음. 영상 하나 띄워놓고 내가 쓰던 Codex 대화창이랑 연동해서 같이 볼 수 있는 작은 페이지임.

처음엔 영상 밑에 질문 타이핑하거나 이모지 버튼 눌러서 반응하게 했었음. Codex가 영상 내용 설명해주고, 일시정지하고, 리액션도 해주고. 나름 잘 돌아가서 괜찮은 프로젝트라고 생각했지.

근데 내가 진짜 원했던 건 그냥 영상 보면서 대화하는 거였음. 음성 기능 계속 언급하기도 했고 제출할 때도 다음 단계로 넣어놨었거든. 근데 다른 시스템을 억지로 갖다 붙이면 뭔가 어색하고 따로 노는 느낌일 것 같더라고.

그러다 업데이트된 Codex 음성 모드로 한번 해봤음.

결국 영상 보면서 진짜 대화가 가능해지더라. "잠깐, 방금 그게 무슨 뜻이야?", "너도 저 사람 말에 동의해?" 이런 식으로. 가끔은 설명해달라고 하고, 가끔은 그냥 보면서 잡담도 하고. 타이핑하려고 멈추거나 어느 부분 말하는 건지 일일이 설명할 필요도 없음.

시작하려면 그냥 유튜브 링크를 페이지에 붙여넣고 Codex한테 세션 연결하라고 하면 됨(댓글에 스크린샷 있음). 그러고 나서 같은 채팅창에서 음성 모드 켜면 끝.

내가 아무 말 안 해도 영상 내용을 계속 따라옴. 5초마다 현재 프레임이랑 자막 확인하게 설정해놨거든. 영상은 끊김 없이 계속 재생되고. 스크린샷 올리거나 프롬프트 계속 날리거나, 계속 지켜보라고 시킬 필요가 없음.

WebMCP 덕분에 얘가 재생 위치도 다 알고 플레이어 제어도 가능함. 긴 설명 필요하면 알아서 일시정지하고, 끝나면 다시 재생하고, 영상 위에 리액션도 띄워줌. 내가 질문하기 전까진 조용히 있으라고 할 수도 있고, 토론할 만한 거 나오면 알아서 떠들게 할 수도 있음.

이모지 버튼도 여전히 잘 작동함. Codex한테 이모지 의미를 지정해줄 수 있어서, 물음표 누르면 "이 부분 설명해줘"라거나 "저 주장 사실인지 확인해봐" 같은 식으로 쓸 수 있음.

페이지에 따로 챗봇 창이 있는 게 아님. ChatGPT Sites에 호스팅된 작은 사이트고, 내가 평소에 쓰던 Codex 대화창이랑 바로 연결됨. 자막 복사해서 다른 서비스에 붙여넣거나, 뭐 물어볼 때마다 대화 새로 시작할 필요가 전혀 없음.

진짜 예전부터 원하던 건데, 솔직히 좀 억지스러운 느낌일 줄 알았거든? 근데 텍스트 버전도 쓸만했는데 이건 진짜 강의나 인터뷰, 영상 에세이 볼 때 계속 켜놓을 만한 물건임. 내가 만들었지만 아직도 신기해 죽겠네 ㅋㅋ

아직 프로토타입이라 대사가 중요한 영상은 자막이 꼭 켜져 있어야 함.

체험하기: https://watch-with-gpt.vechenkovh.chatgpt.site

저장소: https://github.com/miuuyy/watch-with-codex