Claude로 내 영상을 편집하게 하는 법(코드 불필요)

발표자는 Claude에 자신의 원본 영상과 참고 링크를 주고 편집을 지시하는 방식으로 숏폼을 만들고 있다고 소개한다. 새 계정 설정부터 VidIQ와 음성 도구 연결, 채널 분석 기반 편집 기술 생성, 실제 테스트 결과까지 단계별로 보여 준다.

⏱ 00:00발표자는 AI가 자신의 영상을 대신 편집할 수 있을 만큼 발전했다고 말한다. 본인이 말하는 모습을 담은 A-roll 영상을 넘기고 편집을 지시하는 방식으로 숏폼을 주로 만들고 있다.

인스타그램과 유튜브 쇼츠에 하루 한두 편씩 올리고 있으며, 일부는 100만 회 가까이 조회되었다. 이 영상들은 모두 AI 편집을 거쳤고, 이번 영상에서는 AI가 어디까지 편집할 수 있는지와 단계별 워크플로우를 공유하겠다고 밝힌다.

⏱ 01:27발표자는 Claude의 Opus 모델을 주로 쓰지만 ChatGPT 등 다른 모델로도 가능하다고 말한다. 예시로 구글 딥마인드의 Genie 4 영상을 만드는 과정을 든다.

공식 블로그 링크와 직접 촬영한 B-roll 파일 경로를 전달하고, VidIQ MCP 서버로 관련 성과 좋은 영상을 분석하게 한다. 그 결과 대본 초안과 예상 성과 점수(10점 만점에 8점)가 나왔지만, AI 말투가 느껴져 대본은 가이드라인으로만 참고한다고 설명한다.

⏱ 04:34발표자는 대본을 대략적인 기준으로 삼아 카메라를 보며 말하고 원본 영상을 Claude에 넘긴다. 원본에는 멈춤, 반복, 실수가 섞여 있지만 Claude가 편집 기술을 불러와 컷 설정, B-roll 준비, 배경음악 생성, 렌더링, 품질 검사, 결과 전달까지 여러 단계를 실행했다.

음악과 효과음은 11 Labs에서 가져왔고 자막도 Claude가 자동으로 넣었다. 웹에서 가져온 영상과 Hyperframes로 만든 타이핑 장면도 섞여 있으며, 이후 Blender 3D 객체와 차트 애니메이션으로 확장할 계획도 언급한다.

⏱ 07:15발표자는 기존 계정에는 축적된 기억과 학습 내용이 많아 데모에 적합하지 않다고 보고, 새 Claude 월간 구독 계정을 만들었다. 데모 후 해지할 계획이라고 덧붙인다.

'숏폼 영상 편집기' 프로젝트를 만들고 지침에 편집자 역할, 대본 작성 역할, A-roll 정리 역할, B-roll 편집 역할을 적었다. VidIQ는 바이럴 분석, Blender는 3D 요소, Hyperframes는 기본 모션 편집, FFmpeg는 실제 편집을 맡아 별도 편집 프로그램 없이 백그라운드에서 작업이 진행된다고 설명한다.

⏱ 09:44사용자 지정 메뉴에서 VidIQ, Hyperframes, 11 Labs 등을 찾아 Claude에 연결하는 과정을 보여 준다. 브라우저에서 계정을 인증하고 작업 폴더를 지정한 뒤, 반복 확인을 줄이기 위해 권한을 항상 허용으로 설정한다. 발표자는 이 영상이 VidIQ의 후원을 받았다고 밝히며, 후원 이전부터 이 도구를 제작에 써 왔다고 말한다.

이후 자신의 쇼츠 채널을 VidIQ로 분석해 성과 좋은 영상을 찾고, 쇼츠 스크립트 기술과 쇼츠 편집 기술 두 가지를 만들게 했다. 분석에서는 실제 기계 영상, 후킹 문구, 50대 50 분할 화면, 자홍색 자막, 짧은 간격의 B-roll 전환 같은 특징이 드러났다. 편집 기술은 처음에 부족할 수 있어 피드백을 주며 반복해서 다듬는 것이 핵심이라고 강조한다.

⏱ 17:36발표자는 11 Labs API 키와 테스트 녹음을 추가하고, 스크립트가 없는 원본을 주면 타임스탬프가 포함된 스크립트를 11 Labs로 추출하도록 스킬을 업데이트한다. 프로젝트 컨텍스트에 작업 폴더를 추가해 항상 접근하도록 설정한다.

이후 Nvidia Motion Bricks 관련 페이지 링크를 넣자 Claude가 쇼츠 스크립트 스킬을 불러와 페이지를 읽고 유사 영상을 검토했다. 약 50초 길이의 이 아이디어는 5점 만점에 4점을 받아 통과로 판단되었다. 발표자는 AI에 관심 없는 시청자에게는 설득력이 떨어질 수 있지만, 게임이나 엔진처럼 관심사와 맞닿은 주제에서는 효과가 있다고 정리한다.