질문
Claude Code로 숏츠 영상을 만든 성공 사례와 방법을 조사해 정리하라.
답변 요약
- Claude Code로 만든 쇼츠가 실제로 성과를 냈다고 검증된 사례는 아직 드물다. Claude Code를 썼다고 분명히 밝힌 사례는 대부분 성과 수치가 없다. 성과 수치가 있는 사례는 Claude Code를 썼는지 확인되지 않거나, 쇼츠가 아니거나, 2차 전언이다.
- 큰 숫자는 대개 영상이 아니라 도구 쪽에서 나온다. Remotion 출시 데모 600만 뷰(2차 보도, 쇼츠라는 근거 없음), 쇼츠 스킬 저장소의 GitHub 별 3,287개 같은 수치다. 제작법이 화제가 된 것이지, 그 방법으로 만든 채널이 성공했다는 증거는 아니다.
- 그래도 제작 방법은 어느 정도 정리됐다. 결국 네 가지 방식으로 나뉜다. ① 코드로 장면을 그려 렌더링(Remotion·three.js), ② 롱폼에서 쇼츠 잘라내기(Whisper+ffmpeg+Remotion 자막), ③ 고정 템플릿에 대본 JSON만 바꿔 양산, ④ 영상 생성 모델을 스킬로 엮기.
- 여러 출처에서 되풀이된 교훈은 세 가지다. “완료했습니다”를 믿지 말고 직접 보고 들을 것, 템플릿을 고정하고 에이전트에게는 대본만 맡길 것, 한 편을 끝내면 그 과정을 스킬로 남길 것.
사례 판정
각 사례를 세 가지로 따로 본다. Claude Code를 썼다는 근거가 원문에 있는가, 쇼츠(세로 60초 안팎) 형식인가, 성과 수치가 있다면 누가 말한 것인가.
| 사례 | 형식 | Claude Code 사용 근거 | 성과와 출처 등급 |
|---|---|---|---|
| Remotion 공식 출시 데모 (2026-01-20) | X에 올린 출시 데모 애니메이션 (쇼츠라는 근거 없음) | 검색 요약에서만 Claude Code로 만들었다고 나옴. 캡처한 기사 발췌에는 제작 방식 문장이 없음 | X에서 며칠 만에 600만 뷰 — 2차 보도, 공식 게시물은 직접 확인 못 함 |
Claude Animated Shorts (mromidev) | 67초 세로 3D 마을·2D 캐릭터 이야기 쇼츠 | README가 Claude Code 스킬로 설치·실행 | 제작 과정 영상 이틀 만에 32만 조회 — Threads 전언. 저장소 별 3,287(11-14 직접 확인). 쇼츠 자체 조회수는 미확인 |
| 박종현 (sudoremove·SudoCut) | 라이브→롱폼 편집, 하이라이트 쇼츠 클리핑, 모션 그래픽 | 성과가 나온 편집·자동화에 쓴 모델·도구는 발언에 없음. Opus 5.5는 약 2주 전 시작한 모션 그래픽 실험에만 등장 | 채널 365일 1.4M 조회. 100% 자동화 채널 중 정치 카테고리 358.8K 조회 — 본인 발표 화면(기간·형식 세부 미확인) |
| Sina (academai) | 개념 설명 릴스 | ManimGX 코드로 생성. 어떤 에이전트를 썼는지 미확인 | 10편으로 열흘 만에 누적 100만 조회 — 화면 수치(발표 인용) |
| gpters 쇼핑쇼츠 파이프라인 | 25초 세로 제품 쇼츠 | ”주력: Claude Code” 명시 | 성과 수치 없음. 두 번째 제품도 아직 안 만들어 봄 |
HIROKI powerstone-nao | 30~60초 세로, AI 캐릭터 내레이션 | Claude Code가 Remotion 컴포넌트와 TTS 스크립트를 작성 | 41편 양산, 10편째부터 편당 1시간 이내. 조회·수익은 유료 구간이라 미확인. 본인도 “수익화 보장이 아니다”라고 적음 |
| 빌더 조쉬 롱폼→쇼츠 | 롱폼 URL에서 쇼츠 3편 | Claude 스킬 + 서브에이전트 | 데모 수준. 성과 수치 없음 |
| Lemo-Opuscar | 단편 영화(기본 가로, 세로 옵션) | Claude Code 플러그인 | 별 10,367 — 도구 인기이지 영상 성과 아님 |
^[raw/articles/2026-11-14-startuphub-remotion-agent-skills-launch.md] ^[raw/articles/2026-11-14-github-mromidev-claude-animated-shorts.md] ^[raw/transcripts/2026-10-23-ai-frontier-ep119-video-as-code.md] ^[raw/articles/2026-11-14-gpters-claude-code-shopping-shorts-pipeline.md]
정리하면 성과가 가장 구체적인 쪽은 박종현 사례다. 그런데 그 성과도 “AI로 편집해서 영상 하나하나가 잘된 게 아니라, 편집이 빨라져 더 많이 올릴 수 있어서 총조회가 늘었다”고 본인이 선을 그었다(2026-10-23-ai-frontier-ep119-video-as-code). 그래서 지금 근거로 말할 수 있는 것은 “AI 편집 자동화의 이득은 편당 품질보다 생산량”이라는 본인 해석 정도다. 이것도 롱폼 편집 기준이고, 어떤 모델을 썼는지는 확인되지 않는다.
제작 방식 네 가지
1. 코드로 장면을 그려 렌더링
영상 생성 모델 없이 Claude Code가 React(Remotion)·three.js·HTML 코드로 장면을 짜고, 헤드리스 브라우저로 프레임을 찍어 MP4로 만든다. 장면마다 그림체가 일정하고, 숫자 하나만 바꿔 다시 렌더할 수 있다.
- Remotion Agent Skills:
npx skills add remotion-dev/skills로 28개 넘는 규칙 파일을 깔면 Claude가 Remotion API를 제대로 쓴다. 2026-01 출시 직후 “프롬프트 4~5번에 30분”, “1시간 안에 설명 영상” 같은 후기가 쏟아졌다. - Claude Animated Shorts (
cartoon-3d-short): 주제 → 사실 조사 → 대본 → 목소리 →story.ts장면 계획 → 스틸 → 렌더 순서로 간다. 레퍼런스 쇼츠 20편에서 측정한 스타일 바이블과 프레임 38장을 두고, 에이전트가 렌더된 프레임을 그 기준과 대조한다. 67초 최종본 렌더에 약 10분이 걸리고 작업 폴더가 약 1.3GB다. ^[raw/articles/2026-11-14-github-mromidev-claude-animated-shorts.md] - 같은 계열: 2026-10-04-github-heygen-com-hyperframes(HTML→MP4), 2026-11-01-github-lemomo-ai-lemo-opuscar(스타일 66종), 저장소 모음 2026-10-09-x-laobaishare-claude-motion-video-repos, 영상 스킬 2026-07-25-pytorchkr-topic-11377-video-shotcraft-claude-code-codex-ai.
2. 롱폼에서 쇼츠 잘라내기
원본이 이미 있으면 가장 현실적이다. 기본 순서는 다운로드(yt-dlp) → 받아쓰기(Whisper) → Claude가 자막을 읽고 쓸 만한 구간 고르기 → ffmpeg로 자르기 → 자막 입히기다.
- claude-shorts:
/shorts 영상.mp4한 줄로 10단계를 돈다. Claude가 후보 구간 8~12개를 훅 강도·흐름·감정·정보 밀도·마무리 다섯 항목으로 점수 매겨 표로 보여 주고, 사람이 고르면 단어·문장·무음 경계에 맞춰 자르고 Remotion으로 단어 단위 카라오케 자막을 렌더한다. - 빌더 조쉬 방식: 판단이 필요한 구간 고르기는 서브에이전트에, 반복 작업인 자르기·자막은 스킬에 나눠 맡긴다. 첫 결과는 자막 크기와 위치를 지키지 않아서, 레퍼런스 화면 캡처를 주고 포인트 수와 폰트를 숫자로 지정해 두 번 고쳤다.
- 박종현의 SudoCut도 이 순서다. 라이브를 롱폼으로 편집하고, 하이라이트를 잘라 쇼츠로 만들고, 그 위에 LLM이 모션 그래픽 코드를 얹는다.
- 원본 영상 폴더에서 대화로 편집하는 도구는 2026-08-05-aisparkup-post-15009-3-12kb-video-use, 영상을 프레임으로 쪼개 Claude에게 보여 주는 도구는 2026-07-27-github-bradautomates-claude-video다.
3. 고정 템플릿 + 대본 JSON 양산
매주 올리는 시리즈라면 영상마다 새 코드를 짜게 하지 않는다. 검증된 Remotion 프로젝트를 고정하고, 에이전트는 장면 JSON만 쓴다.
- remotion-shorts-skill: 장면 유형 6가지(
hook,text,stat,item,quote,end)와 테마 5개를 고정해 둔다. 에이전트가short.json을 쓰면 몇 초 안에 리뷰 시트가 나오고, 사람이 보고 “렌더해”라고 해야 MP4가 나온다. 작성자는 “영상마다 새 코드면 영상마다 새 버그가 생기고, 장면 길이를 아무도 정하지 않는다”고 템플릿 방식의 이유를 설명한다. 자막은 TikTok·Reels·Shorts 가운데 가장 엄격한 기준을 합친 안전 영역(1080×1920에서 위 288, 아래 672, 왼쪽 96, 오른쪽 192px) 안에만 둔다. - HIROKI: 시나리오 JSON → AivisSpeech(로컬 일본어 TTS,
speedScale 1.15) → Gemini 이미지 → Remotion → YouTube Data API 자동 업로드까지 6단계다. 처음 몇 편은 기본 컴포넌트를 만드느라 오래 걸렸고, 10편째부터 주제만 바꿔 편당 1시간 이내로 만들었다. 수작업일 때는 편당 3~4시간이었다.
4. 영상 생성 모델을 스킬로 엮기
실사·캐릭터 연기가 필요하면 Claude Code는 감독 역할만 하고, 그림과 영상은 생성 모델에 맡긴다. 한 줄 아이디어에서 대본·콘티·영상·편집까지 묶은 2026-11-04-x-dopamine-onlyshot-short-drama-skill(실패 패턴 17개 내장), 잘된 영상을 단어 단위 마크업으로 복제해 변형을 찍어 내는 2026-11-03-github-hypit-ai-hypit(20초 클립 약 1.1달러)가 이 방식이다. 생성 비용이 들고, 결과가 매번 달라 재시도가 잦다.
따라 할 때의 순서
위 사례들에서 공통으로 쓰인 순서를 합치면 다음과 같다.
- 형식을 하나 고른다. 원본이 있으면 2번(클리핑), 설명·이야기 채널이면 1번이나 3번이 맞다.
- 잘된 레퍼런스를 숫자로 분석한다. (분석 방법만 참고한다. 소재 사용 권리는 아래 리스크 참고.) gpters 작성자는 원산지 언어(중국어)로 검색해 원본 소재 6편을 찾았고, Claude가 프레임 83장을 뽑아 조회수와 공유율을 나란히 비교했다. “상위권은 모두 문제나 감정으로 시작하고, 하위권만 제품 소개로 시작한다”는 결론이 대본과 첫 3초를 정했다. cartoon-3d-short도 레퍼런스 20편을 측정한 보고서 7개를 기준으로 쓴다.
- 틀을 고정하고 대본만 바꾼다. 레이아웃·안전 영역·장면 길이는 코드로 굳히고, 에이전트의 노력은 화면에 무슨 말을 띄울지에 쓴다.
- 음성은 단어별 시간 정보가 나오는 TTS를 쓴다. gpters 작성자는 Typecast로 바꾼 뒤 단어 타이밍으로 자막 하이라이트를 정확히 맞췄다. 배경음악은 “사람 목소리 대역을 비워 둔” Suno 곡을, 효과음 7종은 직접 합성해 라이선스 문제를 피했다.
- 렌더 전에 스틸·리뷰 시트로 확인한다. 렌더는 오래 걸리니 정지 화면으로 먼저 고친다.
- 완성본을 직접 재생해서 검수하고, 찾은 문제는 자동 검사로 만든다. 아래 교훈 참고.
- 끝나자마자 “지금까지 한 과정을 스킬로 만들어 줘”라고 한다.
쇼츠 기획·훅·대본 일반론은 Claude Code와 무관하게 2026-10-31-youtuber-shorts-production-methods에 정리돼 있다.
여러 출처에서 반복된 교훈
- “완료했습니다”를 믿지 않는다. gpters 작성자는 음성을 넣었다는데 무음이었고, 컷을 3초로 맞췄다는데 화면이 0.5초 단위로 넘어갔다. 원인은 3초 컷 안에 원본 영상 자체의 장면 전환이 다섯 번 들어 있었던 것으로, 컷 길이만 재는 규칙으로는 잡히지 않았다. 작성자의 결론은 “AI는 작업을 수행했는지는 알지만 결과가 좋은지는 모른다”였다. 빌더 조쉬도 명시한 자막 규격을 무시한 결과를 두 번 돌려보냈다. cartoon-3d-short와 remotion-shorts-skill이 프레임 검수와 리뷰 시트를 파이프라인 안에 넣은 이유도 같다. ^[raw/articles/2026-11-14-gpters-claude-code-shopping-shorts-pipeline.md]
- 말로 안 되면 그림을 보여 준다. “블러가 너무 넓어”는 세 번 말해도 안 됐고, 전체 화면을 한 장에 펼쳐 같이 보자 한 번에 해결됐다. 빌더 조쉬도 원하는 자막 배치의 캡처를 붙여 넣었다.
- 찾은 문제는 검사 도구로 굳힌다. 장면 연속 길이 측정기는 규칙이 되어 다음 제품에서 자동으로 걸린다. 이렇게 만든 자동 검사 7종이 사람이 말하지 않은 문제(잘 안 들리는 효과음)까지 찾아냈다.
- 재사용할 것과 매번 새로 만들 것을 가른다. “파이프라인과 검증 절차가 자산이고, 콘텐츠는 매번 새로 만든다.” 이 구분 없이 전부 자동화하면 매번 바뀌어야 할 것까지 굳어 버린다.
- 작업은 나누고 모델은 섞는다. gpters 작성자는 스킬화 단계에서 서브에이전트로 컨텍스트를 아끼고, 단순 연결 작업은 저렴한 모델에, 설계는 중간 모델에 맡겼다. 작성하는 쪽과 검증하는 쪽도 분리했다.
- 사람 판단이 남는 곳이 있다. 목소리 선택에서 Claude가 추천한 1순위는 작성자가 고른 “킹받는” 목소리가 아니었다. 박종현도 좋은 콘텐츠인지는 시청자 반응으로만 판단한다고 했다.
리스크
- Remotion 라이선스. 개인과 3명 이하 회사만 무료이고, 그보다 큰 회사는 회사 라이선스가 필요하다(2026-11-04-threads-dhdbtkd-claude-animated-shorts). 상업 채널을 회사 명의로 운영하면 먼저 확인한다.
- 양산형 판정. YouTube는 AI 사용 자체가 아니라 비슷한 구성을 반복한 영상을 ‘진정성 없는 콘텐츠’로 수익 정지한다. 템플릿 양산(방식 3)이 가장 직접적으로 걸리는 지점이라, 형식은 고정하되 영상마다 소재·구성·대사가 달라야 한다. 사례와 정책 출처는 2026-10-31-shorts-success-failure-cases에 있다.
- 남의 영상 재가공. 클리핑(방식 2)은 원본 권리가 전제다. 박종현은 허락받았거나 자유 사용이 허용된 영상만 썼다. gpters 작성자는 틱톡에서 찾은 남의 영상을 3초 조각으로 잘라 쓰고 박힌 중국어 자막을 블러로 지웠다. 소재가 제조사 배포본이라 “정식으로 받으면 된다”고 깨달았다고 썼지만, 실제로 허락을 받았다는 서술은 없다. 이 노트에서는 이 사례를 분석·검수 방법으로만 인용한다. 남의 채널 영상을 잘라 번역하는 데모(빌더 조쉬)는 그대로 올리면 위험하다. 관련 팩트체크는 2026-10-31-x-balsamicroket-overseas-shorts-export-factcheck.
- 레퍼런스 자료의 용도. cartoon-3d-short의 레퍼런스 프레임은 그림체 공부용으로만 허락되어 있다. 이야기·캐릭터·목소리는 직접 만들어야 한다.
범위와 한계
- 웹 검색(2026-11-14)과 볼트 노트로 조사했다. 영문·한국어·일본어 글을 봤지만 YouTube 채널 분석 화면을 직접 확인한 사례는 없다.
- HIROKI 글의 성과·실패 분석은 유료 구간이라 읽지 못했다. Remotion 공식 X 게시물과 cartoon-3d-short 제작 과정 영상의 조회수도 직접 확인하지 않았다.
- 검색에 나온 “24시간 200만 뷰”, “월 1만 달러”, 전자책 판매 페이지의 월 수익 기대치는 원문을 확인하지 못했고 마케팅성 주장이라 표에서 뺐다.
- 성과 수치는 모두 본인 진술이거나 2차 전언이며, 대조군이 있는 비교는 없다.
출처
- gpters, 「클로드 코드를 이용한 영상 쇼츠 제작 파이프라인」 (2026-08-03) — https://www.gpters.org/nocode/post/video-shorts-production-pipeline-dN9c0UiddBQqOnr · 완성본 https://youtube.com/shorts/2jNjLSNeCyw
- HIROKI, 「Claude Code×Remotion으로 영상 공장 만들기」 (note.com, 2026-03-15) — https://note.com/douga_hanbai/n/nbaaad0accb5d
- 빌더 조쉬, 「클로드 코드로 유튜브 쇼츠를 100% 자동으로 만들어보았습니다」 (LilysAI 전사) — https://lilys.ai/ko/notes/claude-code-20260108/claude-code-youtube-shorts-automation
- AgriciDaniel/claude-shorts — https://github.com/AgriciDaniel/claude-shorts
- Frank Heijdenrijk, 「Remotion Skill for Claude Code」 (DEV, 2026-11-03) — https://dev.to/fheijdenrijk/remotion-skill-for-claude-code-finished-shorts-from-one-json-file-checked-before-render-m23
- StartupHub.ai, 「Make videos with Claude Code」 (2026-01-22) — https://www.startuphub.ai/ai-news/artificial-intelligence/2026/remotion-ai-video-makes-production-code-from-plain-prompts
- mromidev/claude-animated-shorts — https://github.com/mromidev/claude-animated-shorts
관련 노트
- 2026-10-31-youtuber-shorts-production-methods — 쇼츠 제작법 일반론(기획·훅·대본·편집)
- 2026-10-31-shorts-success-failure-cases — 쇼츠 성공·실패 사례와 정책 전제
- 2026-10-23-ai-frontier-ep119-video-as-code — Video as Code와 SudoCut 성과
- 2026-11-03-threads-mori-mement0-claude-animated-shorts — cartoon-3d-short 6단계 워크플로
- 2026-11-03-github-che0dan-recap-shorts-automation — Gemini 기반 커뮤니티 글 요약 쇼츠 앱(비교용)
- 2026-09-04-github-kajisho5-ffmpeg-skill — 에이전트용 FFmpeg 편집 스킬
- 2026-11-14-claude-code-video-tools-landscape — 영상 제작 스킬·툴킷·맥 데스크톱 앱 지도
- moc-multimedia