빌더 조쉬 쇼츠 "이제 클로드한테 영상 편집을 통째로 맡길 수 있습니다"에서 약속드린 편집 스킬과 설정법이에요. 영상에 나온 화면은 전부 이 방식으로 실제로 돌린 결과예요.

이런 AI 실전 활용법을 계속 받아보고 싶다면


한눈에 보기

단계 클로드가 하는 일 쓰는 도구 비용
1. 받아쓰기 목소리를 단어마다 시각까지 받아 적기 Whisper 무료
2. 컷 말 사이 쉼을 0.2초 안으로 줄이기 ffmpeg 무료
3. 화면 캡처 말하는 사이트를 실제로 열어 캡처 Puppeteer 무료
4. 자막·모션그래픽 단어가 나오는 순간에 맞춰 코드로 짜기 HyperFrames 무료(오픈소스)
5. 검사 입 모양 싱크·개인 정보 노출·소리 크기 Python, Tesseract 무료
(선택) 목소리·아바타 내 목소리 복제, 디지털 트윈 ElevenLabs, HeyGen 유료

직접 녹화한 영상으로 해도 돼요. 그러면 목소리·아바타 단계는 빼고 1번부터 시작하면 돼요.


준비물 설치

클로드 코드가 깔려 있다고 가정할게요. 터미널에서 아래를 한 번만 실행하세요.

# 1) 영상 편집 기본 도구
brew install ffmpeg tesseract tesseract-lang
pip install openai-whisper

# 2) HTML로 영상을 만드는 HyperFrames (클로드 코드 플러그인, 공식 README 명령)
claude plugin marketplace add heygen-com/hyperframes
claude plugin install hyperframes@hyperframes

HyperFrames는 "HTML을 쓰면 영상으로 렌더해 주는" 오픈소스예요. 깃허브 별이 7만 개가 넘어요.

HyperFrames 깃허브 README

HyperFrames 깃허브 README


1. 받아쓰기 + 쉼 줄이기

클로드 코드에 영상(또는 음성) 파일을 주고 이렇게 말하세요.

이 음성을 Whisper로 받아써서 단어마다 시작 시각을 words.json에 저장해 줘.
그리고 말 사이 쉼이 0.18초보다 길면 0.12초만 남기고 잘라서 cut.wav로 저장해 줘. 목소리 속도는 바꾸지 마.

실제로 돌리면 이렇게 단어마다 시각이 붙어서 나와요. 이 시각이 자막과 모션그래픽 타이밍의 기준이 돼요.

단어마다 시각 받아쓰기

단어마다 시각 받아쓰기