클로드 영상 편집 자동화, 위스퍼⁠·캡컷 초벌과 스킬 훈련법

클로드 영상 편집 자동화는 "딸깍 한 번이면 끝"까지는 아니지만, 받아쓰기⁠·초벌 컷⁠·자막⁠·모션 그래픽은 꽤 쉽게 맡길 수 있습니다. 컷 디테일과 구성, 어디를 버리고 살릴지는 아직 사람이 정합니다. 이 글은 클로드 데스크톱 앱, 위스퍼, CapCut으로 초벌 편집을 맡기고, 고친 내용을 스킬에 쌓아 내 편집자로 훈련시키는 방법을 44단계로 정리합니다.

클로드 영상 편집 자동화, 누가 무엇을 맡나

혼자 영상을 만드는 사람도 역할을 나누면 작은 편집팀처럼 일할 수 있습니다.

감독은 사람, 신입 편집자는 클로드

기획하고 녹화하고 마지막에 "이게 재밌냐 아니냐"를 판단하는 감독은 사람입니다. 이 팀에서 가장 중요한 자리입니다. 클로드는 신입 편집자로 컷 편집, 자막, 효과음, 줌, CapCut 프로젝트 조립까지 맡습니다. 신입이라 실수가 많지만, 원하는 걸 정확히 알려 주고 훈련시킬수록 결과가 나아집니다.

받아쓰기는 위스퍼

클로드는 소리를 직접 듣지 못합니다. 그래서 받아쓰기는 OpenAI가 공개한 무료 음성 인식 도구 위스퍼(Whisper)에 맡깁니다. 내 컴퓨터에서 돌아가고, 영상을 넣으면 몇 초에 무슨 단어를 말했는지까지 적어 줍니다. 클로드는 이 기록을 보고 어디를 자르고 붙일지 정합니다. 같은 말을 두세 번 반복하거나 버벅인 곳도 이 기록에서 찾아 걸러 냅니다.

썸네일⁠·이미지는 Higgsfield

썸네일이나 이미지는 Higgsfield(힉스필드, AI 이미지⁠·영상 생성 플랫폼)로 뽑을 수 있습니다. 모델은 GPT 이미지 2.5나 나노 바나나 중 취향대로 고르면 됩니다. 둘 다 글자 폰트에서 AI 느낌이 날 때가 많아서, 이미지만 받고 썸네일 글자는 따로 넣는 방법도 있습니다.

모션 그래픽은 클로드가 코드로

라운드 카드나 점수판 같은 설명용 모션 그래픽은 애프터이펙트 없이 클로드가 코드로 직접 짭니다. 모션 그래픽은 원래 편집에서 가장 어렵고 시간과 돈이 많이 드는 영역이고, 얼굴 없는 채널에는 특히 중요합니다. 자주 쓰는 모션 그래픽은 템플릿으로 만들어 두면 다음 영상에서 숫자와 내용만 바꿔 다시 쓸 수 있습니다.

목소리는 웬만하면 직접

직접 녹음하기 어려울 때는 일레븐랩스(ElevenLabs) 같은 도구로 내 목소리를 복제해 쓰기도 합니다. 들어 보면 꽤 비슷하지만 원래 목소리와 미묘하게 다른 데가 있어서, 웬만하면 직접 녹음하는 편이 낫습니다. 목소리 복제는 본인 목소리나 동의를 받은 목소리로만 합니다.

마지막 손질은 CapCut에서 사람이

AI 편집이 100% 마음에 들 수는 없습니다. 직접 편집해 온 사람이라면 자기만의 호흡, 끊는 지점, 효과 애니메이션이 거슬립니다. 그래서 클로드가 편집한 결과를 CapCut 프로젝트로 모아 두고 마지막 손질은 사람이 합니다.

CapCut에서는 클립 끝을 잡고 쭉 늘리면 잘린 말이 살아나고, 뒤에 있는 자막과 이미지도 같이 밀려서 싱크가 깨지지 않습니다. 전문 편집자가 아닌 초보자가 고치기엔 이 정도면 충분합니다.

광고 느낌은 Katana, 그리고 스킬 파일

광고처럼 속도감 있는 편집은 Higgsfield의 Katana에 맡길 수 있습니다. 편집 스타일 레퍼런스 영상을 하나 고르면 그 컷 순서와 리듬을 내 소재로 다시 만들어 줍니다.

도구만으로는 끝나지 않습니다. 클로드는 효과음이 1분에 몇 개가 적당한지, 자막⁠·영상⁠·말을 어디서 자르는 게 좋은지 같은 내 규칙과 취향을 모릅니다. 그걸 적어 둔 게 "스킬 파일"(클로드가 작업 전에 읽는 규칙 문서)입니다. 아래 7장처럼 고칠 때마다 규칙을 한 줄씩 쌓아 두면 몇 달 뒤에는 내 편집 습관이 담긴 스킬이 됩니다.

따라 하기: 세팅부터 Katana까지 44단계

준비물

• 클로드(Claude) 데스크톱 앱과 유료 요금제. 월 20달러 이상 요금제를 권합니다. "코드" 기능(클로드 코드)은 유료 요금제에서 쓸 수 있습니다.
• CapCut 데스크톱 앱: 클로드가 만든 프로젝트를 여는 용도입니다.
• 편집할 원본 영상 파일
• (선택) Higgsfield 계정: 이미지⁠·영상 생성과 Katana용입니다. 생성 작업에는 크레딧이 듭니다.
• 받아쓰기 도구 위스퍼: 첫 자동 편집 때 클로드가 알아서 설치합니다. 무료입니다.
• 비용: 한 사례에서는 원래 쓰던 월 구독으로 진행했고, 같은 작업을 API 요금으로 환산하면 7만~8만 원 정도였습니다. 위스퍼와 CapCut은 무료로도 됩니다.

1. 클로드 데스크톱 앱 설정

1단계. claude.com/download에서 클로드 데스크톱 앱을 받아 설치합니다.

• 확인: 앱이 컴퓨터에 설치되어 열 수 있습니다.
• 팁: 영상 작업에는 터미널보다 데스크톱 앱이 훨씬 편합니다. 영상과 이미지를 오가며 확인해야 해서입니다.

2단계. 앱 위쪽에서 "채팅" 말고 "코드"를 누릅니다.

• 확인: "코드" 화면이 열립니다.

3단계. 모델을 Opus 5.5로 고릅니다.

• 확인: 선택한 모델 이름이 화면에 표시됩니다.

4단계. 노력 수준(effort, 답하기 전에 얼마나 깊게 생각할지 정하는 설정)을 "높음"이나 "엑스트라 높음"으로 둡니다.

• 확인: 선택한 노력 수준이 표시됩니다.
• 참고: 필수는 아닙니다. 높을수록 꼼꼼하지만 사용량도 더 씁니다.

2. 작업 폴더 만들기

5단계. 작업 폴더를 하나 만듭니다.

• 확인: 빈 폴더가 생깁니다.

6단계. 폴더 안에 영상 파일을 넣습니다.

• 확인: 폴더를 열면 영상 파일이 보입니다.

7단계. 클로드 "코드" 화면에서 이 폴더를 작업 폴더로 고릅니다.

• 확인: 처음 한 번은 폴더에 접근해도 되냐고 묻는 창이 뜹니다.

8단계. 접근 확인 창에서 "허용"을 누릅니다.

• 확인: 클로드가 그 폴더를 작업 폴더로 씁니다.

3. CapCut 준비

9단계. (선택) CapCut에서 빈 프로젝트를 미리 만듭니다.

• 확인: 빈 프로젝트가 목록에 보입니다.
• 대안: 9단계를 건너뛰고, 나중에 클로드에게 "캡컷 프로젝트 만들어서 작업해 주고 여기 정리해 줘"라고 말해도 됩니다. 클로드는 CapCut의 프로젝트 파일(초안 폴더의 draft_content.json 등)을 직접 써서 프로젝트를 만듭니다. CapCut 버전에 따라 파일 형식이 달라 열리지 않으면, 쓰는 CapCut 버전을 알려 주고 다시 만들게 합니다.

4. Higgsfield 연결 (선택)

Higgsfield MCP(클로드가 외부 서비스를 직접 쓰게 해 주는 연결 규격) 주소는 아래 하나입니다.

https://mcp.higgsfield.ai/mcp

10단계. 위 주소를 복사합니다.

• 확인: 주소가 클립보드에 복사됩니다.

11단계. 클로드 왼쪽 사이드바에서 "사용자 지정(Customize)"을 엽니다.

• 확인: 사용자 지정 화면이 열립니다. 메뉴 이름은 2026년 10월 기준입니다.

12단계. "커넥터"로 들어갑니다.

• 확인: 커넥터 목록이 보입니다.

13단계. 목록에 Higgsfield가 있는지 찾습니다.

• 확인: 목록에 있으면 15단계로, 없으면 14단계로 갑니다.

14단계. "+" → "커스텀 커넥터 추가"를 누르고, 이름 칸에 "Higgsfield", 원격 MCP 서버 URL 칸에 10단계의 주소를 붙여 넣고 추가합니다.

• 확인: 커넥터 목록에 Higgsfield가 생깁니다.

15단계. Higgsfield 항목의 "연결"을 클릭합니다.

• 확인: 브라우저에 Higgsfield 로그인⁠·허용 화면이 열립니다.

16단계. 로그인하고 연결을 허용합니다.

• 확인: 클로드 커넥터 목록에 Higgsfield가 연결된 상태로 표시됩니다. "코드" 화면에서는 입력창에 /mcp를 쳐서 Higgsfield가 연결돼 있는지 봅니다.
• 지우기: 사용자 지정 → 커넥터에서 Higgsfield를 제거합니다.

5. 스킬 설치

17단계. 편집 규칙을 담은 스킬 파일을 준비합니다. 다른 사람이 공유한 스킬을 쓸 수도 있고, 없으면 빈손으로 시작해 7장에서 직접 쌓아도 됩니다.

• 확인: 스킬 파일(SKILL.md가 든 폴더나 .zip)이 컴퓨터에 있습니다.
• 주의: 남이 만든 스킬은 설치 전에 SKILL.md와 딸린 스크립트를 열어 무엇을 시키는지 읽어 봅니다. 스킬 안의 지시는 클로드가 그대로 따릅니다.

18단계. 받은 파일을 클로드 "코드" 화면의 입력창으로 끌어다 놓습니다.

• 확인: 파일이 첨부됩니다.

19단계. 클로드에게 "이 스킬 설치해 줘"라고 보냅니다.

• 확인: 클로드가 스킬 폴더를 ~/.claude/skills/<스킬이름>/ 자리에 넣고(SKILL.md가 그 폴더 바로 안에) 설치가 끝났다고 알려 줍니다. 입력창에 /skills를 쳐서 목록에 보이면 됩니다. 안 보이면 /reload-skills를 입력합니다.
• 직접 넣어도 같습니다: 스킬 폴더를 통째로 ~/.claude/skills/ 아래에 복사합니다. 지울 때는 그 폴더를 지웁니다.

6. 첫 자동 편집 맡기기

20단계. 클로드에게 아래 문장을 보냅니다.

녹화본 폴더에 있는 원본으로 15분 내외 영상 초벌 만들어 줘. 컷 편집, 효과음, 모션 그래픽, 줌까지 끝나면 캡컷 프로젝트 만들어서 내가 이어서 편집할 수 있게 해 주고, 위스퍼 같은 필요한 도구는 알아서 설치해 줘.

• 확인: 클로드가 필요한 도구를 확인하고 설치한 뒤 편집을 시작합니다. 설치나 명령 실행 전에 허용을 물으면 내용을 보고 허용합니다.

21단계. 클로드가 작업을 마칠 때까지 기다립니다.

• 확인: 보통 한 시간, 길면 두 시간 정도 걸립니다.

7. 내 스타일로 훈련시키기

편집에는 개인 취향이 많이 들어갑니다. 진짜 내 편집자처럼 쓰려면 좋아하는 스타일대로 훈련을 많이 시켜야 합니다. 짧은 영상으로 연습하면 빨리 돌릴 수 있습니다.

22단계. 가장 짧은 원본 영상을 하나 고릅니다. 1분짜리 녹화 정도면 충분합니다.

• 확인: 고른 영상이 작업 폴더에 있습니다.

23단계. 클로드에게 아래 문장을 보냅니다.

중간중간 버벅이는 부분 자르고 자막 달아서 캡컷 프로젝트를 만들어 줘.

• 확인: 클로드가 무엇을 잘랐는지 목록을 보여 줍니다.

24단계. 목록을 보고 괜찮으면 클로드에게 괜찮다고 말합니다.

• 확인: 클로드가 CapCut 프로젝트에 작업을 넣어 줍니다.

25단계. CapCut에서 만들어진 프로젝트를 엽니다.

• 확인: 편집된 영상이 타임라인에 열립니다.

26단계. 마음에 안 드는 부분을 하나 찾습니다.

• 확인: 고칠 구간의 시각을 적어 둡니다.

27단계. 클로드에게 그 부분의 수정 요청을 보냅니다. 예를 들어 반복된 말이라면 이렇게 씁니다.

37초에 같은 말을 이렇게 두 번 했잖아. 이렇게 반복한 말은 항상 앞에 걸 자르고 마지막 것만 남겨 줘.

• 확인: 해당 구간이 마지막 말만 남도록 바뀝니다.

28단계. 수정이 끝나면 고친 내용을 스킬에 저장하라고 보냅니다. 이 단계가 훈련의 핵심입니다.

오늘 고친 거 스킬에 저장해 줘.

• 확인: 클로드가 스킬의 규칙 파일에 한 줄을 적어 둡니다. 다음 영상부터 그 규칙을 먼저 읽고 시작하니 같은 실수를 덜 반복합니다.

29단계. 기존에 있던 다른 원본 영상으로 편집을 한 번 더 시켜 봅니다.

• 확인: 앞서 지적한 실수가 반복되지 않는지 봅니다.

30단계. 클로드에게 "몇 초에 뭐가 어떻다, 어떻게 했으면 좋겠다" 형태로 피드백을 보냅니다.

• 확인: 피드백이 시각과 바라는 결과를 함께 담고 있습니다. 구체적일수록 잘 고칩니다.
• 참고: 몇 달 쌓으면 스킬에 이런 규칙이 들어갑니다. 자막은 의미 단위로 끊고 애매한 것은 남겨 둔 채 내 판단을 기다린다 / 반복되는 말은 마지막 것만 남긴다 / 효과음은 1분에 보통 한두 개, 인트로나 엔딩에는 많으면 다섯 개

8. 실제 영상 편집 흐름

AI 모델 셋의 대결을 담은 12분짜리 영상을 만든 사례로 흐름을 따라갑니다.

31단계. 먼저 영상을 녹화합니다. 이 사례는 원본만 1시간 46분이었습니다.

• 확인: 원본 파일이 작업 폴더에 있습니다.

32단계. 클로드에게 아래 문장을 보냅니다.

이 녹화본으로 초벌 편집해서 캡컷 프로젝트로 만들어 줘.

• 확인: 클로드가 위스퍼로 받아쓰기 → 다시 말한 구간 자르기 → 라운드 나누기 → 자막 → CapCut 프로젝트 순으로 넘겨 줍니다.
• 팁: 자막은 컷이 다 정해진 뒤 맨 마지막에 넣는 편이 좋습니다. 컷이 바뀌면 자막 위치도 다시 맞춰야 해서입니다.

33단계. 클로드가 끝낼 때까지 기다립니다.

• 확인: 이 사례에서는 18분 35초짜리 초벌이 1시간 23분 만에 나왔습니다. 시켜 놓고 다른 일을 해도 됩니다. 여기까지는 거의 딸깍에 가깝습니다.

34단계. 초벌 영상을 처음부터 봅니다.

• 확인: 살려야 할 말이 잘린 곳과, 잘라야 할 말이 남은 곳을 찾습니다.
• 참고: AI는 말을 그대로 읽고 분석하지만 재미나 센스는 읽지 못합니다.

35단계. CapCut에서 늘어지는 구간을 직접 자릅니다. 이 사례에서는 게임 중계 구간을 클로드가 그대로 남겨 뒀는데, 보는 맛은 있어도 앞뒤와 겹쳐 늘어져서 직접 잘랐습니다.

• 확인: 해당 구간이 짧아집니다.
• 참고: 자르고 늘리는 정도는 초보자도 CapCut에서 충분히 할 수 있습니다.

36단계. 고친 버전을 클로드에게 다시 넘기며 수정 요청을 보냅니다.

점수판이 너무 위로 몰려 있어. 가운데로 해 주고, 효과음이 너무 많아. 또 줌이 너무 과해.

• 확인: 점수판 위치, 효과음, 줌이 바뀝니다. 이 사례에서는 이런 수정 요청이 모두 47개였습니다.
• 주의: 웃음 포인트를 살리는 자막 같은 건 초벌에 잘 안 들어갑니다. 아직은 사람이 짚어 줘야 합니다.

37단계. 클로드에게 대본과 자막 피드백을 함께 보냅니다.

• 확인: 대본을 함께 주면 전문 용어를 잘못 알아듣거나 엉뚱한 데서 끊는 일이 줄어, 한 번에 거의 맞는 자막이 나옵니다. 이 사례에서는 예전에 한두 시간 걸리던 자막 작업이 5분으로 줄었습니다.

9. Katana로 광고 느낌 내기 (선택)

모션 그래픽을 잘 만들어도 프로페셔널한 광고 편집 느낌을 따로 내고 싶을 때가 있습니다. Katana는 레퍼런스 영상의 컷 순서⁠·속도⁠·전환을 유지한 채 내 소재로 다시 만들어 줍니다. 4장의 Higgsfield 연결이 먼저 되어 있어야 합니다.

38단계. Higgsfield의 Katana 페이지(higgsfield.ai/mcp/katana)에 들어갑니다.

• 확인: 레퍼런스 영상이 많이 보입니다.

39단계. 레퍼런스 영상 하나를 고릅니다.

• 확인: 고른 레퍼런스가 선택됩니다.
• 주의: 내 레퍼런스를 올릴 때는 내가 권리를 가졌거나 허락받은 영상만 씁니다.

40단계. "Try in Claude"(클로드에서 해 보기)를 누릅니다.

• 확인: /katana로 시작하는 프롬프트와 레퍼런스가 담긴 클로드 대화가 열립니다.

41단계. 영상에 쓸 사진(인물⁠·제품)을 첨부합니다.

• 확인: 사진이 입력창에 올라갑니다.

42단계. 소재로 쓸 내 영상(예: 초벌 편집본)을 첨부합니다.

• 확인: 영상 파일이 입력창에 들어갑니다.

43단계. 바꿀 것(인물, 스타일, 효과)과 유지할 것(속도, 전환, 색감, 음악)을 한두 줄로 적습니다.

• 확인: 요청 문장이 입력되어 있습니다.

44단계. 엔터를 누릅니다.

• 확인: Katana가 레퍼런스의 컷 리듬과 효과를 내 영상에 입힌 결과를 돌려줍니다. 원래 영상과 나란히 놓고 비교해 봅니다. 같은 대화에서 고칠 점을 말하면 직전 결과에서 이어 고칩니다.
• 주의: Higgsfield MCP로 하는 생성 작업은 크레딧이 듭니다. 실행 전에 Higgsfield 계정에서 남은 크레딧과 요금 안내를 확인합니다.

시간과 비용, 한 사례 기준

아래 숫자는 12분짜리 영상 한 편을 만든 한 사례의 기록입니다. 작업 방식과 영상 길이에 따라 크게 달라집니다.

• 시간: 같은 분량을 예전에 혼자 편집하면 30시간이 넘게 걸렸는데, 이번에는 8시간 정도였습니다. 그 8시간도 대부분 보고 고르고 지시하는 시간이었고, 그동안 클로드가 계속 일했습니다.
• 클로드 비용: 원래 쓰던 월 구독으로 했고, API 요금으로 환산하면 7만~8만 원 정도였습니다. 20달러짜리 요금제로도 보통 일주일에 영상 한두 개 편집은 할 만합니다.
• 그 밖의 도구: 위스퍼와 CapCut은 무료로도 되고, Higgsfield는 이미지나 영상 생성이 필요할 때만 씁니다.
• 외주와 비교: 편집자에게 맡기면 10분짜리 영상 한 편에 컷⁠·자막⁠·효과음까지가 보통 10만~30만 원, 모션 그래픽까지 넣으면 영상 하나당 30만~60만 원 선입니다.

원래 쓰던 구독을 빼면 따로 든 비용이 거의 없고, 밤에 맡겨 두면 아침에 초벌이 와 있습니다.

어디까지 맡기고 어디부터 직접 하나

• 맡겨도 되는 일: 받아쓰기, 초벌 편집, 자막, 모션 그래픽
• 사람이 해야 하는 일: 컷 디테일, 구성, 재미를 기준으로 어디를 버리고 살릴지 정하기, 웃음 포인트 짚기

AI가 편집자를 완전히 대체하지는 못해도, 혼자 작업하는 사람에게는 손이 빠른 조수가 하나 생기는 셈입니다. 따라 해 본 뒤에는 다섯 가지를 점검합니다.

• 클로드 데스크톱 앱에서 "코드" 화면이 열리고 작업 폴더가 지정돼 있다
• 스킬을 설치했거나, 빈 스킬에 규칙을 쌓기 시작했다
• 클로드가 만든 CapCut 프로젝트를 열 수 있다
• 짧은 영상으로 수정 요청과 "스킬에 저장" 요청을 한 번 해 봤다
• 마지막 손질은 사람이 CapCut에서 직접 한다