클로드 코드 4K 영상 편집 자동화, 촬영본 넣고 한 줄로 시키는 편집기 만들기

클로드 코드 4K 영상 편집은 촬영본을 폴더에 넣고 한 줄만 입력하면 컷, 자막, B롤, 3D 그래픽, 4K 렌더까지 이어지게 만드는 방법입니다. 편집 순서와 규칙을 파일로 적어 두고 클로드 코드가 그대로 따르게 하는 방식이라, 한 번 만들어 두면 영상마다 같은 품질로 돌릴 수 있습니다. 설치부터 첫 편집, 실패했을 때 고치는 한 줄 지시까지 46단계로 정리했습니다.

4K 영상 편집 자동화의 원리

편집을 사람이 하나씩 누르는 대신, "편집은 이 순서대로, 이 채널은 이렇게"라는 설계도와 규칙 파일을 클로드 코드에게 먼저 만들어 줍니다. 그다음부터는 촬영본을 폴더에 넣고 한 줄 지시를 내리면 컷, 자막, B롤(말하는 화면 사이에 끼우는 보조 영상), 3D 그래픽, 4K 렌더까지 파일을 남기며 이어집니다. 사람이 하는 일은 마지막 확인본을 보는 것 하나입니다.

이 방식은 윈도우 컴퓨터를 기준으로 설명합니다. 아래 비용, 시간, 사용량은 한 사례의 값이라 환경에 따라 달라집니다. 단계 중 따라 칠 프롬프트가 필요한 곳에는 직접 쓸 수 있는 예시 문장을 넣었습니다.

B롤 비용과 요금제 사용량

B롤 비용 구조

클로드 코드 요금제는 이미 쓰고 있는 구독이라 편집 비용에서 뺍니다. 새로 드는 돈은 AI로 만드는 B롤 생성비입니다. B롤은 fal.ai(여러 이미지⁠·영상 생성 모델을 한곳에서 쓴 만큼 결제하는 서비스)에서 장면마다 알맞은 모델을 골라 씁니다. 비용을 줄이는 핵심은 장면 종류에 따라 만드는 방식을 나누는 것입니다.

• 전에 만든 B롤을 다시 쓰는 장면과 3D·숫자 그래픽은 코드로 그립니다. 생성 비용이 들지 않습니다.
• 글자가 없는 사물이나 배경은 이미지 한 장에 카메라 이동 효과를 줍니다.
• 한글이 화면에 보여야 하는 장면은 한글을 정확하게 그리는 이미지 모델을 씁니다.
• 사람이 움직여야 하는 장면만 영상 생성 모델로 만듭니다. 가장 비싼 방식이라 마지막에 씁니다.

모델별 단가는 자주 바뀌고 해상도와 길이에 따라 달라집니다. 실제 금액은 fal.ai의 모델 페이지에서 확인해야 합니다. 어떤 방식이든 편당 예산 상한을 규칙 파일에 적어 두면 지출이 예상 범위를 넘지 않습니다(34단계).

요금제 사용량

클로드 코드는 요금제 사용 한도 안에서 돌아갑니다. 맥스 요금제는 5x가 월 100달러, 20x가 월 200달러입니다(2026년 10월 기준, 변동 가능). 한 사례에서는 맥스 20x에서 편집기 제작 이틀, 슬라이드 영상 편집, 대본 작성을 합쳐 한도의 27% 정도를 썼습니다. 처음 편집기를 만드는 주에는 5x에서 한도를 넘길 수 있으니 하루에 한 부씩 며칠에 나눠 만드는 편이 안전합니다.

편집기의 구조, 공장 컨베이어 벨트

작업 흐름

촬영본이 들어가면 다음 순서로 흘러갑니다.

1. 소리를 글로 바꾸는 받아쓰기
2. 어디를 자를지 AI가 결정
3. 실제 컷
4. 문장마다 어떤 화면을 띄울지 정하는 장면표
5. B롤 준비
6. 겹치기(자막, 카드, 그래픽을 한 화면에 합성)
7. 검사
8. 영상 파일 굽기(렌더)

파일 두 종류

• 작업 순서를 적은 CLAUDE.md(클로드 코드가 작업 폴더에서 먼저 읽는 지침 파일)와 스킬(AI가 보는 작업 설명서)
• 규칙: 편집 습관을 숫자로 적은 파일과 브랜드 색⁠·글꼴 파일

설계 원칙 네 가지

• 판단은 AI가, 실행은 검증된 도구가 합니다.
• 모든 단계가 결과 파일을 남깁니다.
• 돈은 규칙으로 묶습니다.
• 숫자는 코드 안이 아니라 규칙 파일에 넣습니다.

도구를 고르는 기준은 네 가지입니다. 마우스 없이 명령만으로 다룰 수 있는지, 결과가 파일로 남는지, 무료이거나 쓴 만큼만 내는지, 오래 검증됐는지입니다. 프리미어 프로와 캡컷은 첫 번째 기준 때문에 이 구성에서 뺍니다.

준비물과 쓰는 도구

• 윈도우 컴퓨터. 클로드 데스크톱 앱의 코드 화면에서 로컬 폴더로 작업하려면 윈도우에서는 Git for Windows가 필요합니다.
• 클로드 데스크톱 앱과 로그인할 계정⁠·유료 요금제. 사용량이 많아 맥스를 권하는 사례가 있고, 모델은 오퍼스 5.5, 생각하는 강도는 중간으로 두었습니다.
• 참고 영상 1~2편(3~10분), 또는 장면 전환 순간을 캡처한 이미지 15~20장
• 채널 로고, 채널 아트, 웹사이트 캡처 같은 디자인 이미지
• 내 촬영본(얼굴이 나오는 설명 영상)
• fal.ai 계정(B롤 생성, 쓴 만큼 결제)
• 무료 도구: faster-whisper(음성을 글로 바꾸는 받아쓰기, MIT 라이선스), FFmpeg(영상 자르기⁠·이어 붙이기⁠·인코딩), HyperFrames(HTML로 영상 장면을 그려 MP4로 굽는 오픈소스 도구, Apache 2.0)

HyperFrames는 Node.js 22 이상과 FFmpeg가 있어야 돌아갑니다. faster-whisper는 파이썬으로 설치하고, 그래픽 카드가 없어도 CPU로 돌아갑니다. 이 설치 항목은 2부의 설치 프롬프트에 모두 들어갑니다.

1부. 클로드 코드 작업 폴더 만들기

1단계. 클로드 데스크톱 앱을 내려받는다.

• 주의: 공식 다운로드 주소는 claude.com/download입니다. 검색 광고나 비공식 사이트의 설치 파일은 받지 않습니다.
• 확인: 설치 파일이 내려받아진다.

2단계. 앱에 로그인한다.

• 확인: 앱 메인 화면이 열린다.

3단계. 왼쪽 위의 "코드" 탭을 누른다.

• 위치: 앱 왼쪽 위.
• 확인: 클로드 코드 화면이 보인다.

4단계. 편집 작업실로 쓸 폴더를 하나 만든다.

• 예시: "클로드 에디트 스튜디오"처럼 용도가 보이는 이름을 붙입니다.
• 확인: 새 폴더가 생긴다.

5단계. 코드 화면에서 그 폴더를 선택한다.

• 확인: 클로드 코드가 그 폴더 안에서 일하는 상태가 된다.

2부. 도구 설치

6단계. 설치 프롬프트를 준비한다.

• 원칙: 도구 이름, 버전, 설치 명령까지 정확히 적고 "목록에 없는 건 깔지 말라"를 꼭 붙입니다. "편집에 필요한 거 깔아 줘"라고만 하면 AI가 마음대로 다른 도구를 깔고 버전이 달라져, 뒤의 명령이 맞지 않습니다.
• 엔진은 받아쓰기용 위스퍼 계열(faster-whisper), 편집 스크립트용 파이썬, HyperFrames용 Node.js입니다.
• 확인: 프롬프트가 클립보드에 복사된다.

아래는 그대로 써 볼 수 있는 예시입니다. 버전은 이미 깔린 것을 먼저 확인해 표로 보여 달라고 하는 방식이라 숫자를 직접 적지 않았습니다.

이 폴더에서 영상 편집기를 만들 거야. 아래 목록만 설치하고, 목록에 없는 건 절대 깔지 마.
1. Python (3.9 이상)
2. faster-whisper (pip로 설치, large-v3-turbo 모델 사용)
3. FFmpeg
4. Node.js (22 이상)
5. HyperFrames (npx hyperframes로 쓸 수 있는지 확인)
먼저 이미 깔린 것과 버전을 확인해서 표로 보여 줘. 내가 허락하면 없는 것만 설치해. 설치가 끝나면 도구별 버전표를 다시 보여 줘.

7단계. 클로드 코드 입력창에 붙여 넣는다.

• 확인: 입력창에 프롬프트가 들어간다.

8단계. 전송한다.

• 확인: 클로드가 이미 깔린 것을 먼저 확인해 표로 보여 준다.

9단계. 허용창이 뜨면 무슨 명령인지 읽어 본다.

• 확인: 명령 내용을 이해한다. 모르는 명령은 "이 명령이 뭘 하는지 설명해 줘"라고 먼저 묻습니다.

10단계. 허용한다.

• 확인: 설치가 진행된다.

11단계. 설치가 끝나고 나온 버전표를 확인한다.

• 확인: 목록에 적은 도구 다섯 개가 모두 표에 있고, 목록에 없는 도구가 끼어 있지 않다.

3부. fal.ai 연결

12단계. 두 번째 프롬프트로 fal.ai 연결 파일을 만든다.

• 이 단계에서는 연결용 파일만 만들어 두면 됩니다. 실제 B롤 생성은 7부에서 합니다.
• 확인: 연결 파일이 만들어진다.

fal.ai로 이미지와 영상을 만들 수 있게 연결 파일만 만들어 줘. API 키는 코드나 파일에 적지 말고 FAL_KEY 환경 변수에서 읽게 해 줘.

13단계. fal.ai 로그인과 키 등록은 직접 한다.

• API 키나 비밀번호는 채팅창에 붙여 넣지 않습니다. fal.ai의 공식 방식은 키를 FAL_KEY 환경 변수에 넣어 두는 것입니다. fal.ai 대시보드의 Keys 메뉴에서 키를 만들고, 내 PowerShell에서 직접 등록합니다. 키는 만들 때 한 번만 볼 수 있으니 바로 복사합니다.
• 확인: 새 PowerShell 창에서 클로드 코드를 열었을 때 FAL_KEY가 읽힌다. 키를 채팅창에 보여 주지 않고, 변수가 비어 있는지만 확인해 달라고 시킵니다.

4부. 내 채널 편집 문법 정하기

참고 영상 고르기

14단계. 참고 영상을 하나 고른다.

• 기준 세 가지: 내 영상과 형식이 같을 것(얼굴이 나오는 설명 영상이면 같은 종류, 브이로그는 맞지 않음), 자막⁠·그래픽⁠·화면 전환이 분명히 보이는 영상일 것, 한두 편이면 충분하고 3~10분짜리가 알맞으며 같은 분야 해외 채널도 좋다는 것.
• 확인: 참고 영상이 정해진다.

15단계. 영상 파일을 폴더에 넣는다.

• 대안: 영상 파일이 없으면 장면이 바뀌는 순간을 캡처한 이미지 15~20장을 씁니다.
• 확인: 폴더에 파일이 들어 있다.

편집 문법 뽑기

16단계. 편집 문법 뽑기 프롬프트를 준비한다.

• 핵심 두 가지는 "모든 요소를 숫자로"와 "다시 그려서 비교하기"입니다. 뽑은 숫자로 장면을 다시 그려 원본과 비교하고, 다른 곳을 고치는 방식입니다.
• 확인: 프롬프트가 준비된다.

폴더의 참고 영상을 분석해서 편집 규칙 파일을 만들어 줘. 컷 간격, 자막 위치와 크기, 글꼴, 색, 화면 전환 길이, 그래픽이 나오는 타이밍을 전부 숫자로 적어. 그다음 그 숫자만으로 대표 장면 다섯 개를 다시 그려서 원본과 나란히 비교하고, 다른 곳은 숫자를 고쳐 줘.

17단계. 클로드 코드 입력창에 붙여 넣어 전송한다.

• 확인: 클로드가 영상을 일정 간격으로 쪼개 한 장에 모아 본다.

18단계. 결과로 나온 편집 규칙 파일을 확인한다.

• 규칙 예시: 공백이 0.3초 넘으면 자른다, 자막은 한 줄에 한 구절, 같은 화면이 8초 넘게 가면 안 된다.
• 확인: 규칙 파일이 생기고 숫자가 적혀 있다.

19단계. 참고 영상은 분석에만 쓴다.

• 주의: 남의 영상의 화면이나 소리를 가져다 쓰면 저작권 문제가 생길 수 있습니다. 규칙의 숫자만 가져옵니다.
• 확인: 내 영상에 참고 영상의 화면⁠·소리가 들어가지 않는다.

5부. 채널 색과 글꼴 뽑기

20단계. 로고, 채널 아트, 웹사이트 디자인 파일(이미지) 중 하나를 폴더에 넣는다.

• 확인: 폴더에 이미지가 있다.

21단계. "여기서 색을 뽑아 줘"라고 요청한다.

• 요령: 색을 뽑아 달라고 하면서 "글꼴은 바꾸지 말아 줘"처럼 바꾸지 말아야 할 것도 함께 말합니다.
• 확인: 색이 뽑힌다. 예시는 메인 초록, 포인트 하늘색, 남색 배경입니다.

6부. 편집기 조립

22단계. 설계도 프롬프트를 준비한다.

• 설계도에는 단계 이름, 각 단계에서 만들 것, 예산 규칙까지 적습니다. 위 4부와 5부에서 만든 규칙 파일 이름을 그대로 넣습니다.
• 확인: 프롬프트가 준비된다.

이 폴더에 영상 편집기를 만들 거야. 순서는 받아쓰기, 컷, 장면표, B롤, 합성, 검사, 렌더야. 각 단계는 결과 파일을 남기고, 편집 규칙과 브랜드 규칙은 규칙 파일에서 읽어. B롤 예산은 편당 상한을 규칙 파일에 두고 넘길 것 같으면 먼저 물어봐. 지금은 1단계만 만들어 줘.

23단계. 한 단계만 만들어 달라고 요청한다.

• 주의: 한 번에 다 만들려고 하지 않습니다. 한 단계 만들고, 내 촬영본으로 돌려 보고, 결과 파일을 확인한 뒤 다음 단계로 갑니다. 받아쓰기 파일이 잘 나왔는지 본 다음에 컷으로 가는 식입니다.
• 확인: 해당 단계의 결과 파일이 만들어진다.

24단계. 결과가 이상하면 "여기가 이상해"라고 말하며 고쳐 간다.

• 주의: 처음부터 참고한 영상과 똑같이 나오지는 않습니다. 고치는 과정이 정상입니다.
• 확인: 수정 요청 뒤 결과가 바뀐다.

7부. 첫 편집, 촬영본 넣기

폴더와 받아쓰기

25단계. 편집기 안의 원본 폴더(raw) 안에 날짜와 짧은 제목으로 폴더를 만든다.

• 확인: 그 폴더 안에 새 폴더가 생긴다. 영상 한 편이 폴더 하나입니다.

26단계. 그 폴더 안에 얼굴 촬영본을 넣는다.

• 확인: 폴더 안에 촬영본이 있다.

27단계. 받아쓰기를 시작시킨다.

• 입력 방법: 편집기를 만들 때 정한 실행 문장을 입력합니다. 아직 정하지 않았다면 아래처럼 말로 시키면 됩니다. 사용하는 모델은 faster-whisper의 large-v3-turbo이고, 그래픽 카드가 없어도 돌아갑니다. 다만 CPU만 쓰면 시간이 더 걸립니다.
• 확인: 단어마다 시작⁠·끝 시간이 붙은 받아쓰기 파일이 생긴다.

오늘 날짜 폴더의 촬영본을 faster-whisper large-v3-turbo로 받아쓰고, 단어마다 시작과 끝 시간을 넣어서 저장해 줘.

28단계. 잘못 알아들은 단어를 찾아 달라고 요청한다.

받아쓰기에서 잘못 알아들은 것 같은 단어를 찾아 줘. 특히 사람 이름, 채널 이름, 서비스 이름 같은 거. 틀린 말, 맞는 말 표로 먼저 보여주고 내가 오케이하면 고칠 목록을 만들어서 한 번에 고쳐 줘.

• 확인: 틀린 말과 맞는 말을 정리한 표가 나온다.

29단계. 표를 확인하고 "오케이"라고 답한다.

• 확인: 한 번에 고쳐지고 받아쓰기와 컷 목록이 파일로 남는다.

컷과 장면표

30단계. 컷 편집이 진행되는 것을 기다린다.

• FFmpeg가 컷 목록대로 한 번에 자르고 이어 붙이며, 유튜브용 소리 크기도 맞춥니다.
• 확인: 자른 곳이 컷 목록에 시간과 이유로 남는다. 예를 들면 "0.8초 데드(무음)"입니다.

31단계. 확인본을 보다가 살리고 싶은 문장이 있으면 요청한다.

3분 10초 문장 살려 줘.

• 확인: 원본은 그대로 있어 되살릴 수 있다.

32단계. 장면표(문장마다 띄울 화면 표)가 만들어지는 것을 기다린다.

• 규칙 예시: 질문과 감정은 얼굴, 단계 설명은 파이프라인 그래픽, 두 개 비교는 막대 그래프, 목록은 카드, 명령어와 프롬프트는 코드 상자.
• 확인: 장면표가 만들어진다. 이 규칙이 규칙 파일에 적혀 있어 매번 같은 기준으로 고릅니다.

33단계. 화면 합성(자막⁠·카드⁠·그래픽⁠·3D)이 만들어지는 것을 기다린다.

• 합성에는 HyperFrames를 씁니다. HTML과 CSS로 장면을 그리고 MP4로 굽는 방식입니다.
• 확인: 배경, 얼굴, 그래픽, 자막, B롤이 한 화면에 겹쳐진다.

B롤과 예산

34단계. 한 편 예산을 규칙 파일에 적어 달라고 요청한다.

• 예시: 한 사례에서는 넉넉하게 8달러(약 1만 원)로 잡았고 실제로는 절반도 쓰지 않았습니다. 넘을 것 같을 때만 물어보게 합니다.
• 확인: 예산이 규칙으로 저장된다.

35단계. 장면마다 B롤 계획표(문장, 방식, 모델, 비용)가 나오는 것을 확인한다.

• 규칙: 비용이 들지 않는 방식부터 쓰고, 사람이 움직여야 할 때만 영상 생성으로 갑니다.
• 확인: 비용이 표로 계획된다.

36단계. B롤이 이미지 먼저, 괜찮은 것만 영상으로 만들어지는 것을 기다린다.

• 확인: 클로드가 직접 이미지를 보고 괜찮은 것만 영상으로 만든다.

검사와 렌더

37단계. 굽기 전 검사 결과를 확인한다.

• 확인: 글자 겹침, 잘림, 얼굴 가림을 클로드가 정지 화면으로 검사한다. 3D에서 가려진 챕터 제목을 클로드가 위로 옮기는 식으로 고칩니다.

38단계. 1080p 확인본을 본다.

• 주의: 이 단계가 사람이 하는 유일한 일입니다. 건너뛰고 4K로 가면 시간만 버립니다.
• 확인: 확인본에서 문제가 없다.

39단계. 괜찮으면 4K 렌더를 밤에 돌린다.

• 주의: 한 사례에서는 3분 15초 영상의 4K 렌더에 약 46분, 20분짜리는 5시간 가까이 걸렸습니다. 컴퓨터 사양에 따라 크게 달라지니 첫 렌더는 짧은 영상으로 시간을 재 봅니다.
• 확인: 아침에 화질별 파일 3개와 검사 결과가 나와 있고, 소리 크기를 확인한다. 한 사례에서는 0.9초 넘는 무음이 없었습니다.

8부. 3D 모션 입히기

40단계. 마음에 드는 모션 그래픽 영상을 찾아 기법을 배워 달라고 요청한다.

• 주의: 편집 습관이 아니라 표현 기법을 배우는 것입니다. 짧은 영상은 0.2~2초 간격으로 쪼개 기법을 정리합니다.
• 확인: 기법 정리 결과가 나온다.

41단계. HUD(화면에 겹쳐 보이는 계기판 모양 장식) 같은 장식은 내 브랜드 색으로 다시 만들게 한다.

• 확인: 브랜드 색이 적용된다.

42단계. B롤 규칙 두 가지를 규칙에 넣는다.

대사랑 일대일로 맞아야 되고, 같은 종류가 연속 두 번 나오면 안 된다.

• 확인: 규칙 파일에 두 규칙이 들어 있다.
• 패턴 예: 상황은 실사 인물, 행동은 실사 위 숫자, 개념은 3D 메타포, 비유는 실사 비유, 경고는 빨간 경고.
• 주의: 3D는 코드(three.js, 브라우저에서 3D를 그리는 자바스크립트 라이브러리)로 그려서 생성 비용이 없습니다. 다만 라이브러리를 인터넷에서 불러오는 구성이면 렌더할 때 인터넷 연결이 필요합니다.

9부. 실패 세 번과 한 줄 수정

처음 돌렸을 때 크게 어긋나는 경우가 세 가지 있고, 각각 한 줄 지시로 고친 뒤 그 한 줄을 규칙으로 남깁니다.

43단계. 귀여운 마스코트 캐릭터가 나오면 다음처럼 말한다.

귀여운 캐릭터 말고 내용과 분위기에 맞게. 대사와 상관없는 B롤은 금지. 인물은 한국인으로.

• 확인: 분위기에 맞는 B롤로 바뀐다.

44단계. 화면 속에 뜻 없는 한글이 나오면 다음처럼 말한다.

화면에 글자가 보이면 한국어를 정확하게 그리는 GPT 이미지 2로 해 줘.

• 확인: 한글이 정확하게 표시된다.

45단계. 얼굴만 둥둥 뜨면 다음처럼 말한다.

사진은 생김새만 참고하고 조명, 표정, 각도, 옷은 장면에 맞게 해 줘. 카메라 보지 말고 하던 일에 집중하는 모습으로.

• 확인: 장면에 맞는 인물 컷으로 바뀐다. 세 줄 모두 규칙 파일에 남겨 두면 다음 편부터 같은 실수가 반복되지 않습니다.

10부. 스킬로 남기기

46단계. 순서, 예산 규칙, 고친 규칙을 스킬로 저장해 달라고 요청한다.

• 스킬은 "이 일은 이 순서대로 해라"를 적어 둔 작업 설명서이고, 슬래시로 시작하는 짧은 명령으로 불러옵니다. 클로드 코드에서 /skills를 입력하면 설치된 스킬 목록을 볼 수 있습니다.
• 확인: 다음 영상부터는 폴더에 촬영본을 넣고 /edit-video 같은 한 줄이면 된다. 명령 이름은 스킬을 만들 때 정하는 이름을 따릅니다.
• 팁: 폴더는 날짜별로 정리하고, 한번 만든 B롤은 라이브러리에 모아 두면 다음 영상에서 비용 없이 다시 쓸 수 있습니다.

단계별 점검표와 막힐 때

• 버전표에 목록에 없는 도구가 끼어 있지 않다.
• 편집 문법과 브랜드 규칙 파일이 만들어졌다.
• 첫 촬영본으로 받아쓰기, 컷, 장면표, 합성까지 단계별로 확인했다.
• 1080p 확인본을 보고 4K 렌더를 돌렸다.

앞으로의 일정은 세 갈래로 잡으면 부담이 적습니다. 오늘은 설치 프롬프트로 도구를 깔고 편집 문법을 뽑습니다. 이번 주에는 편집기를 조립해 컷까지 갑니다. 이번 달에는 끝까지 굽고 스킬로 저장합니다.

뒤쪽 명령이 맞지 않으면 설치 때 AI가 임의로 다른 도구나 버전을 깔았을 수 있습니다. 도구 이름, 버전, 설치 명령을 정확히 적고 "목록에 없는 건 깔지 말라"를 붙여 다시 시킵니다. 어디서 틀렸는지 모르겠다면 한 번에 만든 탓일 수 있으니, 한 단계 만들고 확인한 뒤 다음으로 갑니다. 4K 렌더가 너무 오래 걸리면 1080p 확인본까지만 먼저 만들고 렌더는 자는 동안 돌립니다.