클로이드 옵스 5.5를 유튜브 영상 제작에 활용하여 AI로 역사 영상을 만들고 있습니다. 역사 채널 ‘니혼 카타이 신쇼’는 대본부터 내레이션, 이미지, 영상까지 최종 조립까지 전부 AI에게 맡겨 제작합니다. 밤에 지시를 내리고 잠든 후, 아침에 결과물을 확인하는 방식으로 운영하고 있습니다. 영상 1편(8분 영상)당 비용은 대략 1,500엔에서 가장 많으면 3,000엔 정도이며, 진행 시간은 6~8시간 정도 소요됩니다. 최근 28일(2026년 8월 28일 ~ 9월 25일) 동안 시청 횟수는 569,723회, 총 재생 시간은 약 10,264시간, 채널 구독자는 663명 증가했습니다. 촬영은 하지 않았습니다. 각 단계별로 어떤 것을 사용하고, 어떤 것을 스스로 결정하는지를 순서대로 설명합니다. 전체 내용은 무료로 제공됩니다.
AI로 역사 영상을 만들 때, 저는 먼저 영상의 주제를 정합니다. 예를 들어 “삼국시대 무장”이나 “대항시대 문화” 등 관심 있는 분야를 선택합니다.
다음으로 필요한 정보를 수집합니다. 책, 논문, 인터넷 기사 등 다양한 정보원에서 관련 자료를 모읍니다. 특히, 신뢰할 수 있는 역사학자의 저서를 참고하는 경우가 많습니다.
수집한 정보를 바탕으로 영상의 구성을 생각합니다. 어떤 흐름으로 영상을 연결할지, 어떤 내레이션을 추가할지 등 구체적인 계획을 세웁니다.
그리고 영상 편집 소프트웨어를 사용하여 영상 자료를 편집합니다. 배경 음악이나 효과음을 더하고, 자막이나 부제를 삽입하여 영상을 완성합니다.
이 과정에서 AI 툴도 활용합니다. 예를 들어 이미지 인식 AI를 사용하여 영상 내 인물이나 물체를 특정하거나, 번역 AI를 사용하여 해외 문헌을 번역합니다.
《일본 해체 신서》는 에도 시대를 체험하는 영상을 제공하는 채널입니다. 료고에서 1박을 하고, 온천에 들어가고, 토치기번의 번군 순찰로 720km를 걸어보는 등, 현실적인 체험을 담은 영상을 모아놓고 있습니다.
저는 에도 시대의 골목길을 촬영하고 있지 않으며, 성우에게 의뢰하고 있는 것도 아닙니다. 콘텐츠를 모아 정리하는 과정은 전부 AI 서버에서 이루어집니다. 편집 소프트의 타임라인도 거의 건드리지 않고 있습니다.
먼저 결론을 말씀드리겠습니다.
제작 작업의 99%를 클로드 오퍼스 5.5가 수행하고 있습니다.
- 제가 하는 일은 어떤 에피소드를 만들지 결정하는 것과, 아침에 완성된 것을 확인하는 것입니다.
- 1본당 비용은 대략 1,500원입니다.
- AI에 맡기는 데 걸리는 시간은 6에서 8시간입니다.
6시간에서 8시간 정도는 잠을 자는 시간입니다. 밤에 PC를 작동시켜서 아침에 확인합니다.
AI로 영상 제작”이라고 하면, 텍스트를 입력하여 이미지를 만들어 붙여넣는 앱을 떠올릴 수 있습니다. 제가 하는 일은 그것과는 조금 다르며, 각 단계마다 담당자를 분담하고, 각 단계별로 다른 AI에게 전달하는 방식입니다.
밤에 준비하고 아침에 확인한다.
하루 일과는 거의 매일 같습니다.
저녁에는 클로드 코드에 “다음 회는 이를 제작해 주세요”라고 전달했습니다. 사용 중인 모델은 클로드 옵스 5.5입니다. 대본 작성부터 음성, 그림, 영상 자료 제작, 마지막으로 1개의 영상으로 합치는 모든 단계에 대한 지시 사항이 여기에 모여 있습니다.
제공되는 것은 어떤 부분을 진행할지, 그리고 그것을 어떤 경험으로 보여주고 싶은지에 대한 것입니다. 각 단계마다 별도의 화면을 열고 다른 서비스에 로그인하여 출력을 다운로드한 다음 다음 단계로 전달하는 등 수작업은 하지 않았습니다.
또한, 그대로 PC를 켜고 잠을 자겠습니다. 그래서 아침에 쓰여진 내용을 확인하고, 처음으로 자신의 영상을 첫 시청자에게 거의 같은 상태로 보게 됩니다. 수정해야 할 부분이 있다면 수정하고, 문제가 없다면 제목과 썸네일의 문구를 결정하여 공개합니다. 유튜브에 게시하는 것은 수동입니다.
수정 작업 역시 제 손으로 진행하는 데 30분 정도 소요됩니다. 이후, 영상 완성 시점까지 다시 확인합니다.
업무로서 제 시간을 활용하고 있는 것은 밤의 지시와 아침의 확인뿐입니다.
프로세스 중 가장 긴 “재료를 만들고 배열하는” 시간이 그대로 수면 시간과 중첩되는 것이 이 운영의 핵심이라고 생각합니다.
반대로 말하면, 야간 지시가 불분명하면 아침에 8시간 분량의 결과물이 한꺼번에 불명확해집니다. 따라서 지시에 시간을 집중합니다.
대본과 음성, 그림, 영상이 각각 제공됩니다.
각 단계별로 어떤 것을 사용하고 있는지 적겠습니다.
클로드 코드의 서브 에이전트에게 시나리오 작성을 지시하라.
본작은 클루드 코드의 서브 에이전트인 코덱스의 아스트라를 연결하여 작성하고 있으며, 동시에 사실 확인도 진행하고 있습니다.
가장 중점을 두고 있는 곳은 바로 여기입니다. 에도 체험 영상은 정보를 나열하는 것만으로는 시청자가 끝까지 시청하지 못합니다. “그 자리에 있었다면 어떤 기분이 들었을까”를 주인공의 시점에서 따라갈 수 있는 대본인지에 따라 영상의 완성도가 달라집니다.
대본이 확정되면 이후 과정은 이에 따릅니다.
내레이션: 젬니 3.8 플래시 TTS
제미니 3.8 플래시 TTS로 음성을 읽어주고 있으며, 이는 클로드 옵스 5.5로부터의 자동 지시에 의해 작동하는 시스템입니다.
일본어 발음은 인공지능(AI)이 오래전부터 취약하게 만들었던 부분입니다. 고유 명사, 숫자, 구식 어휘가 붕괴될 경우, 내용이 맞더라도 시청자들은 어색함을 느낄 수 있습니다.
제 생각에는 이 기능을 사용하면서 발음이 상당히 개선된 것 같습니다. 단순히 읽어내는 것이 아니라, 감정도 느껴지는 듯한 억양으로 읽히게 되었습니다. 특히 역사 영상은 해설을 덧붙이는 부분이 크기 때문에, 이 기능이 효과를 발휘했습니다.
이미지 및 영상: fal에서 제작된 것
이미지와 동영상 생성은 fal을 Claude(Opus 5.5)와 연결하여 사용하고 있습니다.
- 영상 생성: H3 Max Turbo
- 이미지 생성: GPT 이미지 2.5
API를 통해 연결되어 있어 “이 장면의 그림을 만들고, 이를 움직여서 다음 장면으로 진행하는” 과정을 그대로 자동으로 반복할 수 있습니다. 브라우저에서 한 장씩 만들어 저장하는 작업이 사라지는 것이 방치될 수 있었던 이유 중 하나입니다.
영상 편집 및 조립: Claude Code와 HyperFrames
Claude Code와 HyperFrames을 활용한 영상 편집 및 조립 방법에 대해 설명합니다. Claude Code는 영상 편집 작업을 효율적으로 수행할 수 있도록 설계된 도구이며, HyperFrames는 고해상도 영상 편집에 특화된 솔루션입니다. 이 두 가지 기술을 결합하면 더욱 빠르고 정확하게 영상을 편집하고 조립할 수 있습니다.
특히, Claude Code는 복잡한 영상 편집 작업을 단순화하고, HyperFrames는 고품질 영상 제작을 지원하여 영상 제작자의 생산성을 크게 향상시킬 수 있습니다.
이러한 기술들을 통해 다양한 영상 콘텐츠 제작에 활용할 수 있으며, 특히 광고, 영화, 드라마 등 고품질 영상 제작에 적합합니다.
편집 및 조립은 Claude Code(Opus 5.5)와 HyperFrames를 활용하여 진행합니다.
하이퍼프레임은 HTML로 영상의 구성을 작성하고, 이를 그대로 영상으로 렌더링하는 방식입니다. 타임라인을 마우스로 정렬하는 대신, 구성을 코드로 작성할 수 있게 되어, 그 작업을 클로드 코드에 맡길 수 있습니다.
여기, 제가 보기에는 분수령이 되는 지점이었습니다. 편집 작업을 사람이 화면에서 직접 만지는 방식으로 남았다면, 잠자는 동안에도 한 통은 완성될 수 없었을 것입니다.
한 권에 약 1,500엔을 어떻게 생각하시나요?
비용은 한 권당 약 1,500엔입니다.
내역은 회마다 달라집니다. 그림의 수, 움직이는 시간, 다시 만든 횟수 등으로 조정되므로, 하나하나 세밀하게 쌓는 것보다 대략 이 정도라는 시각을 가지고 있습니다.
더 저렴하게 하려면 더 저렴하게 할 수 있습니다. 생성량을 줄이고, 움직일 부분만 선택하며, 재사용 가능한 부분은 재사용합니다. 그만큼 결과물도 달라지므로, 현재는 1,500엔 정도 수준으로 운영하고 있습니다.
이 금액을 높다고 보는가, 낮다고 보는가는 비교 대상에 따라 달라지는 것 같습니다. 저는 “8~9분 분량의 영상 한 편”으로 보고 있습니다. 외부에서 주문하는 형태와 비교하는 것이 아니라, 지속적으로 제공될 수 있는 금액에 묶여 있는지만을 기준으로 합니다.
가장 우려되는 것은 단가 자체보다, 빗나갔을 때 손해를 보지 않는 금액인지 여부입니다. 영상이 나오는지 확인해야 빗나갔을 때 어느 정도 손해가 될지 알 수 있습니다. 한 개에 수만 엔을 투자한다면, 빗나갔을 때 다음 영상을 찍는 손해가 멈추지 않습니다. 1,500엔이라면 멈추지 않습니다.
유튜브 수익은 여기서 명시하지 않습니다. 제가 직접 확인하기에는 형태가 불분명하여 숫자로 표현할 수 없습니다. 재생 횟수와 시간만 제공할 수 있습니다.
28일의 숫자에서 드러난 것들
2026년 8월 28일부터 9월 25일까지 28일 동안 ‘일본 해체 신서’의 판매 부수는 다음과 같았습니다.
- 시청 횟수: 569,723회
- 총 재생 시간: 약 10,264시간
- 채널 구독자: 663명
- 썸네일 조회수: 2,772,578회 / 클릭률 4.46%
이 기간 동안 가장 많이 시청된 영상은 “[에도 체험] 료코에 1박해보기”로 388,871회 시청되었습니다. 전체 기간 동안의 시청 횟수 중 약 70%가 이 영상에서 나왔습니다. 그 다음이 “720km를 걷는 고토리번의 상킨 고사이”로 54,407회, “200년 전 이자카야에서 술을 마시는 경험”으로 40,325회, “장야에서 하루 보내기”로 13,033회, “200년 전 湯屋(온천)에 들어가보기”로 10,261회입니다.
숫자들을 나열해 보니까, 명확하게 보인 것이 3가지 있었습니다.
첫 번째는 “~해 보았다” 형태만 강하기 때문입니다. 제목이 “~해 보았다/해 보러”로 되어 있는 6개는 시청 회수 중앙값이 11,647회였고, 나머지 것은 1,116회입니다. 같은 에도 이야기를 하더라도 설명으로 하는 것인지, 체험으로 하는 것인지에 따라 숫자가 크게 달라졌습니다.
두 번째로, 총 23개의 긴 형식 에피소드로 구성되어 있으며, 각각 3분 이상 소요됩니다. 시청 횟수는 91%, 총 재생 시간은 97%, 등록자 중 상당수인 465명이 나타났습니다. 짧은 45개 에피소드로는 49명의 등록자가 나타났으며, 특히 8~9분 분량의 에피소드 8개가 총 509,951회의 재생 횟수를 기록하고 있습니다. 짧은 에피소드는 진입 장としては 효과가 있지만, 그것 자체가 누적되는 것은 아닙니다.
세 번째로, 늘어날 때는 한 권으로 충분하다는 의미입니다. 68권의 책을 출판했는데, 그 중 한 권이 기간의 70%를 차지했습니다. 이는 반대로, 빗맞는 책이 아무리 많이 있어도 채널이 계속 진행된다는 의미이기도 합니다. 한 권의 책 제작 비용을 줄이는 것과, 계속해서 출판을 멈추지 않고 지속할 수 있는 형태를 유지하는 것은 같은 이야기입니다.
AI에게 맡기는 이유는 단순히 빠르게 만들고 싶어서가 아니라, 정확한 결과가 나올 때까지 계속해서 만들어낼 수 있는 상태를 만들고 싶기 때문입니다.
또 다른 것은 이것이 자신의 일이라는 것을 명확히 한 적이 있습니다. 위에 언급한 썸네일 표시 횟수와 클릭률입니다. 표시된 사람 중 실제로 열어본 사람은 4.46%입니다. 나머지는 내용이 담기 전까지 썸네일과 제목만 보고 지나치는 것입니다. 만들 부분을 AI에 넘겨줘도 클릭될지 여부는 제가 쓴 글자 그대로 결정됩니다. 여기가 끝까지 사람의 일이라고 생각합니다.
AI에 맡기고 스스로 결정하는 것들
현재 분법 방식을 그대로 적어드리겠습니다.
AI에 맡겨야 할 일들은 다음과 같습니다.
데이터 분석, 특히 방대한 양의 고객 데이터 분석은 AI가 훨씬 빠르고 정확하게 수행할 수 있습니다. 또한, AI는 패턴을 식별하고 예측하는 데 탁월하며, 이를 통해 마케팅 캠페인 최적화, 위험 관리, 사기 탐지 등 다양한 분야에서 효율성을 높일 수 있습니다.
AI는 반복적이고 지루한 업무 자동화에도 효과적입니다. 예를 들어, 고객 문의 응대, 송장 처리, 데이터 입력 등은 AI가 처리함으로써 직원들이 더욱 창의적이고 가치 있는 업무에 집중할 수 있습니다.
더 나아가, AI는 새로운 제품 및 서비스 개발에도 활용될 수 있습니다. AI는 고객 데이터를 분석하여 고객의 니즈를 파악하고, 이를 바탕으로 맞춤형 제품 및 서비스를 개발하는 데 기여할 수 있습니다.
물론, AI는 인간의 직관이나 창의성을 완전히 대체할 수는 없습니다. 하지만 AI는 인간의 능력을 보완하고 확장하여, 더욱 혁신적인 결과물을 만들어낼 수 있도록 돕는 강력한 도구입니다. AI를 효과적으로 활용하기 위해서는 인간과 AI가 협력하는 방안을 모색하고, AI의 한계를 인지하며, 윤리적인 문제에 대한 고민을 지속적으로 해야 합니다.
- 대본을 쓰다
- 내레이션 읽는다
- 장면 그림을 제작하는
- 그림을 움직인다
- 한 영상으로 묶어 제작한다.
자, 내가 결정하는 것들
- 어느 에피소드를 만들지 (무엇을 체험하는 에피소드로 할지)
- 일본 측의 방향성에 대한 논의가 진행 중입니다(각각 어떤 감정을 불러일으키는지를 결정하는 회의를 진행할 회수를 결정하는 과정).
- 제목과 썸네일 텍스트 거의 AI
- 완성본 공개 여부
- 유튜브에 게시(수동으로 진행하고 있습니다).
선의 긋는 방법은 간단합니다. 답이 하나로 결정되는 작업은 AI에게 맡기고, 선택해야 할 사항은 자신에게 남겨두는 것입니다. 이미지 해상도나 음성 해독의 경우, “여행을 멈추는 회차 발표 여부”는 후자입니다.
이 선을 긋고 하면 아침 확인이 훨씬 빨리 끝납니다. “제가 결정한 것이 반영되었는지”만 확인하는 데 한정되기 때문입니다.
이제 시작하는 분들을 위해
만약 똑같은 것을 시도해보고 싶다면, 순서는 하나라고 생각합니다. 우선 한 통을 끝까지 만들어보는 것입니다.
공정을 분리하여 고려하면, 맞춰야 할 사항이 많아 보입니다. 대본, 성도, 그림, 영상, 조립을 모두 먼저 결정하려 하면, 보통 시작하지 않습니다.
한 번에 모든 것을 연결하려고 하면 어디서 멈추고 있는지 알 수 없습니다. 우선 한 줄을 끝까지 통과시킨 다음, 사람이 하지 않아도 되는 부분을 하나씩 AI로 옮겨가는 것이 효과적이라고 생각합니다.
또한 1개를 완성하면, 그 이후에는 동일한 형태의 반복이 됩니다. 비용과 시간을 예측할 수 있게 되면 “오늘은 몇 회차를 뽑을지”만 고려하면 되므로 가장 효과적인 투자라고 생각합니다.
저는 이 운영을 부업으로 활용하는 동시에 추진하고 있습니다. note는 단독 콘텐츠로 월 7만 엔, X의 수익화로는 총 1,000달러까지 달성했습니다. 유튜브는 아직 채널 숫자를 늘리는 과정이며, 영상 1편의 제작 비용과 시간을 얼마나 줄일 수 있을지 검토하고 있습니다. 유튜브 수익 조건 달성까지 구독자 수만 남았습니다.
해당 영상은 유튜브에서 “니혼 해체 신서”를 검색하면 바로 찾을 수 있습니다. 에도 체험 편부터 시청하는 것이 빠를 것 같습니다.
- 유튜브: [전통 오카게 체험] 오카게에 1박해본 경험
언제든지 편하게 질문해주세요.
부업과 관련하여 시도하고 있는 것들은 다른 글에도 썼습니다.
- **프로필**
* 이름: 오카바야 읠
* 나이: 28세
* 직업: 프리랜서 작가
* 취미: 독서, 영화 감상, 여행
* 좋아하는 작가: 무라카미 하루키, 토노 에이이치
* 최근 읽은 책:
* 『이타카의 숲』 - 하우징 미쓰지
* 『용의자 X의 헌신』 - 토바시 기요미츠
* 좋아하는 영화:
* 『센과 치히로의 행방불명』 - 미야자키 하야오
* 『백 투 더 퓨처』 - 로버트 저메킨스키
**기사 목록**
* 2023년 11월 15일: 독서 기록 - 『너, 별처럼』 - 츠쓰미 마사오
* 2023년 11월 8일: 영화 리뷰 - 『고질라 -FINAL WAR-』
* 2023년 10월 28일: 독서 기록 - 『밤은 짧고 걷네 소녀』 - 나쓰메 소세키
* 2023년 10월 21일: 영화 리뷰 - 『너의 이름은.』 - 오오가와라 사토시
* 2023년 10월 14일: 독서 기록 - 『해리 포터와 마법사의 돌』 - J.K. 롤링
* 2023년 10월 7일: 영화 리뷰 - 『스파이더맨: 뉴 홈』
* 2023년 9월 23일: 독서 기록 - 『그리고, 바를 통치하는』 - 츠쓰미 마사오
* 2023년 9월 16일: 영화 리뷰 - 『아바타: 물의 길』 - 제임스 카메론
* 2023년 9월 9일: 독서 기록 - 『죄와 벌』 - 페르-헤르베르트・멜로
- 죄송합니다. 해당 URL(https://x.com/Oren46902)에 접속하여 note.com 게시글의 본문 청크 87/87 내용을 확인하지 못합니다. 번역을 위해 게시글 내용 또는 URL을 제공해주시면 100% 한국어 번역본을 제공해 드리겠습니다.
출처: note 원문
번역: Gemma 3(.44) 초벌 + 교정 53청크
원문 보기 | 출처: note.com