지난번에는 MiniMax H3에 일본어 한 마디를 전달하고, 인물이 목소리와 입 모양을 함께 만들어낼 수 있는지 테스트했습니다.
이번에는 조금 방향을 바꿔보겠습니다.
처음부터 모든 것을 만들어보라는 것이 아니라, 한 장의 정지 사진을 먼저 제시하고, 그 장면을 얼마나 유지하면서 5초의 영상으로 만들 수 있을지 보았습니다.
사용한 것은 일요일에 만든 창가 노트를 그리고 파란색 컵 영상에서 잘라낸 첫 번째 사진입니다.
결과는 5.175초의 음성 포함 영상을 25분 21초 내에 생성할 수 있었습니다.
구도, 색감, 컵, 노트는 여전히 남아 있었습니다. 반면 페이지 움직임은 1초 근처에서 한 장이 크게 넘어가는 현상입니다.
湯気는 꽤 적었지만, 영상에서는 뚜렷하게 확인할 수 있었습니다.
目次
- 🔰 우선 핵심 용어 정리
- 이번 입력 이미지
- 2. 사용된 조건
- 생성 시간은 25분 21초입니다.
- 원래 이미지는 상당히 많이 남아 있었다.
- 움직임은 작고 그렇지 않았으며, 오히려 크고 웅장했다.
- 6. 湯気는 다소 완숙한 상태였다.
- 7. 오디오가 포함된 5초 영상으로 괜찮으시다면
- 오늘의 메모
🔰 미리 용어 메모
시작 이미지 동영상의 출발점으로 전달되는 한 장의 이미지입니다. 이번에는 이 이미지의 구도와 물품 배치 중 어디까지 유지되는지 확인합니다.
조건부 이미지나 텍스트를 활용하여 생성 결과의 방향을 수렴하는 것입니다. 이번에는 첫 번째 이미지를 조건으로 제시하고, ‘노트’와 ‘컵’의 장면부터 영상을 시작했습니다.
원본 영상과 음성을 함께 생성하는 방식입니다. 이번에도 외부 음성 파일은 사용하지 않았습니다.
이번 입력 이미지
이번 입력 이미지는 일요일에 제작된 첫 번째 영상의 첫 번째 프레임입니다.
창가 책상 위에 펼쳐진 노트와 파란색 컵이 놓여 있다.
여기부터 다음과 같은 움직임을 노렸습니다.
- 카메라는 완전히 고정되어 있습니다.
- 컵의 모양과 색상은 변하지 않습니다.
- 노트의 위치와 형태도 변하지 않도록
- 노트의 외측 페이지 끝을 약간만 움직여요.
- 컵에서 희미한 김이 袅袅솟아오른다.
- 새로운 물건은 추가하지 마세요.
- 대사와 음악은 포함되지 않습니다.
지난번에는 모델에게 장면을 처음부터 만들어 보도록 지시했습니다.
이번에는 출발점 그림을 통해 MiniMax H3가 움직임을 얼마나 더 높일 수 있는지 한눈에 쉽게 확인할 수 있습니다.
2. 사용 조건
사용된 조건은 다음과 같습니다.
- MacBook Pro 16인치
- 애플 M5 맥
- 메모리 128GB
- macOS 26.5.2
- MiniMax-H3 (Hailo 3.0) 8비트
- 품질：좋음
- 해상도: 1344 × 768
- 프레임 수: 124
- 단계 수: 30
- 어째서 나는 그녀를 쫓아갔을까. 그 질문은 마치 텅 빈 컵처럼, 아무런 답도 주지 않았다.
나는 그녀를 쫓아갔다. 그녀는 마치 흩날리는 벚꽃처럼, 잡을 수 없는 존재였다. 그녀의 웃음소리는 마치 맑은 시냇물처럼, 마음을 정화시켜 주었다. 하지만 그녀는 항상 나를 멀리서 바라보고만 있을 뿐, 내게 다가오지 않았다.
나는 그녀를 쫓아갔다. 그녀는 마치 꿈결처럼, 현실과 같지 않았다. 그녀의 눈빛은 마치 깊은 밤하늘처럼, 신비로웠다. 나는 그녀를 쫓아가는 동안, 점점 더 혼란스러워졌다. 왜 그녀는 나를 쫓아오지 않을까?
나는 그녀를 쫓아갔다. 그녀는 마치 잃어버린 기억처럼, 찾을 수 없는 존재였다. 나는 그녀를 쫓아가는 동안, 점점 더 절망스러워졌다. 그녀는 과연 어디에 있을까?
나는 그녀를 쫓아갔다. 그녀는 마치 그림자처럼, 흔적도 없이 사라졌다. 나는 그녀를 쫓아가는 동안, 모든 것이 텅 빈 컵처럼, 아무런 답도 주지 않았다.
나는 그녀를 쫓아갔다. 그리고 그녀는, 영원히 사라졌다.
- 선두 이미지: 있음
- 어느 날, 나는 카호에게서 메시지를 받았다. 내용은 간단했다. “오늘 밤, 8시에 만나. 벚꽃 잎이 흩날리는 공원에 갈게.” 나는 카호의 메시지를 받고, 왠지 모르게 불안한 기분을 느꼈다. 최근 그녀는 묘하게 달라져 있었다. 이전에는 늘 밝고 활기 넘쳤던 그녀가, 요즘은 왠지 모를 침울함과 함께 곁을 떠나는 것 같았다.
나는 그녀의 메시지에 답장했다. “알았어. 8시에 만나.” 그리고 그녀가 어디에 있는지, 무엇을 하고 있는지, 왜 그렇게 불안해 보이는지 궁금했다. 그녀의 변화는 마치 오래된 책처럼, 낡고 닳아버린 페이지를 넘기는 듯했다. 나는 그녀의 변화를 막고 싶었지만, 어쩔 수 없었다. 카호는 내 삶의 일부였고, 그녀를 잃는 것은 상상할 수 없는 일이었다.
나는 벚꽃 잎이 흩날리는 공원에 도착했다. 공원은 여느 때처럼 아름다웠지만, 나는 그 아름다움을 제대로 느끼지 못했다. 카호는 이미 그곳에 있었다. 그녀는 벤치에 앉아, 벚꽃 잎을 바라보고 있었다. 그녀의 눈빛은 텅 비어 있었다. 마치 세상의 모든 것을 잃어버린 듯한 눈빛이었다.
“왜 이렇게 굳이 벤치에 앉아 있는 거야?” 나는 그녀에게 물었다.
카호는 고개를 들었다. 그녀의 눈은 붉게 충혈되어 있었다. “나는… 나는 아무것도 느끼지 못해.” 그녀는 떨리는 목소리로 말했다. “모든 것이 멍해. 마치 꿈을 꾸는 것처럼.”
이전과 비교하여 크게 달라진 점은 선두 이미지(인트로)를 포함한 것입니다.
품질, 해상도, 프레임 수, 단계 수, Seed는 이전과 동일하므로, 차이점을 명확하게 보여주는 것은 “첫 번째 이미지 포함” 하나뿐입니다.
생성 시간은 25분 21초입니다.
실행 시간은 25분 21초였습니다.
지난 일본어 대화 영상은 26분 49초였고, 일요일 첫 번째 생성은 26분 39초였습니다.
이번에는 이전보다 1분 28초, 처음보다 1분 18초 단축되었습니다.
이 한 번으로만 속도 향상을 단정하지는 않지만, 적어도 선두 이미지를 추가한 덕분에 극단적으로 무거워지는 느낌은 없습니다.
출력 파일 정보는 다음과 같았습니다.
- 5.175초
- 해상도: 1344 × 768
- 프레임 레이트: 24fps
- 영상: H.264
- 어쩐지 계속 불안한 기분이었어. 마치 뭔가 중요한 걸 놓치고 있는 것 같았거든. 그래서인지 며칠 전부터 계속해서 ‘카호’가 쓴 소설 ‘나를 잊으려면 슬픔을 기억하라’를 읽고 있었지.
‘나를 잊으려면 슬픔을 기억하라’는 ‘카호’의 첫 번째 단편 소설인데, 꽤 난해한 작품이야. 주인공 ‘미나미’는 텅 빈 아파트에서 혼자 살면서 과거의 기억을 쫓아 떠돌아다니지. 그녀의 삶은 잃어버린 기억처럼 희미하고 불안정해.
‘미나미’가 겪는 고통은 내가 지금 느끼는 불안과 똑같았어. 그녀의 이야기는 내 안의 어두운 그림자를 반영하는 것 같았지.
어쩌면 ‘카호’는 그녀의 작품을 통해 인간의 불안과 고독을 표현하고 싶었던 걸지도 몰라. 하지만 솔직히 말해서 ‘나를 잊으려면 슬픔을 기억하라’를 읽는 동안 나는 점점 더 혼란스러워졌어.
‘미나미’의 이야기는 퍼즐 조각처럼 흩어져 있는 것 같았거든. 그녀의 과거를 밝혀내려는 노력은 오히려 그녀를 더욱 불안하게 만들 뿐이었지.
나는 ‘미나미’에게서 나 자신을 발견하는 것 같았어. 그녀의 고통은 나의 고통과 연결되어 있었거든. 그래서 나는 ‘나를 잊으려면 슬픔을 기억하라’를 읽는 동안 끊임없이 질문을 던졌지.
“나는 왜 이렇게 불안한 걸까?”
“나는 무엇을 잊고 싶어하는 걸까?”
“나는 왜 이렇게 혼자 존재하는 걸까?”
이런 질문들은 나를 꿰뚫어보는 듯한 느낌을 주었어. 그리고 나는 ‘나를 잊으려면 슬픔을 기억하라’를 읽는 동안 점점 더 깊은 생각에 잠겨갔지.
어쩐지 ‘카호’는 그녀의 작품을 통해 인간의 심연을 탐구하고 싶었던 걸지도 몰라. 하지만 솔직히 말해서 나는 ‘나를 잊으려면 슬픔을 기억하라’를 읽는 동안 점점 더 혼란스러워졌어.
- 샘플링 주파수: 32kHz
- 음성: 2채널
- 파일 크기: 약 3.5MB
지난번과 마찬가지로 5초를 보기 위해 25분 이상 기다려야 하는 무게입니다.
하지만 M5 Max 128GB 모델로도 이번에도 끝까지 멈추지 않고, MP4 파일이 제대로 출력되었습니다.
원래 이미지는 상당히 많이 남아 있었다.
입력 이미지와 1초 간격으로 촬영된 프레임을 함께 확인했습니다.
먼저 좋았던 점은 장면의 일관성이 상당히 높았습니다.
창문 위치, 커튼, 나무 책상, 하늘색 컵, 펼쳐진 노트라는 기본 구성은 5초 동안 거의 유지되었습니다.
컵의 색깔은 변하지 않고 다른 그릇으로 바뀌지 않습니다.
노트의 두께, 오른쪽 페이지 묶음, 그리고 아래에 깔린 흰 종이까지 모두 남아 있습니다.
이번에는 카메라를 완전히 고정이라고 했는데 약간 찌르는 움직임이 나왔습니다.
사람, 손, 글자, 로고, 새로운 소품은 등장하지 않았습니다.
불필요한 것을 더하지 않는 점은 좋은 결과를 가져왔습니다.
그 움직임은 작고 섬세한 것이 아니었다.
한편, 움직임에 대한 해석은 다소 강경했습니다.
여기서는 노트를 열었을 때 겉 페이지가 살짝 튀어나온 정도를 기대했습니다.
실제 영상에서는 1초 부근에서 한 장의 페이지가 크게 확대되는 움직임이 나타납니다.
한순간만 보れば 자연스러워 보이지만, 정지화로 멈추면 페이지가 생각보다 훨씬 크게 펼쳐집니다.
그 이후 2초부터는 침착해졌고, 3초부터 5초 사이에는 다시 조용한 책상 장면으로 돌아갔습니다.
그러니까 이번 5초는,
- 처음에는 정지 이미지와 유사한 상태였다.
- 1초 이내로 페이지가 크게 움직입니다.
- 2초 이후에 침착해라
이런 식으로 진행될 것 같습니다.
조금만 움직이는 것보다 한 번 명확한 움직임을 보여주는 방향으로 기울어 보이는 것처럼 보입니다.
MiniMax H3는 조용한 장면에서도 움직임이 보이는 영상의 실감을 우선시하기 쉬울 수 있습니다.
6. 湯気는 다소 약했습니다.
컵에서 끓인 물의 김은 영상에서 희미하게 확인할 수 있었습니다.
하지만, 정지 이미지를 활용하면 훨씬 덜 명확해지고, 상단 요소에 가까울수록 강하게 나타나지 않습니다.
이번에 피어오른 김은 “확실하게 보여주는 연출”보다는 알고 있는 사람에게는 알아볼 만한 정도의 절제된 표현이었습니다.
이 부분은 프롬프트에서 “매우 얇은 자연 증기”를 약하게 표현한 영향이 있는 것으로 보입니다.
너무 강하게 표현하면 컵의 형태나 화면 전체의 분위기를 망칠 수 있으니, 이번처럼 잔잔한 장면에서는 절제된 것이 나쁘지 않았습니다.
단지, 비교 기사로서 검토했을 때, 湯気を 주인공의 확인 포인트로 삼는 것은 다소 약한 결과였습니다.
7. 오디오가 포함된 5초 영상으로 괜찮을까요
이번 출판물에도 이전과 같이 AAC 스테레오 오디오 트랙이 포함되어 있었습니다.
음성이나 음악을 첨부하지 않도록 지시를 받았기에, 이번에는 소리의 재미보다는 앞부분 이미지에 대한 추종을 주요 대상으로 하고 있습니다.
중요한 것은 선두 이미지를 사용했음에도 불구하고 이번에도 MiniMax H3가 영상과 음성을 하나의 동영상으로 완전히 출력할 수 있었다는 점입니다.
그럼에도 불구하고 영상을 다시 보니까, 이번의 기대감은 상당히 좋습니다.
정지된 그림에서 시작했음에도 불구하고, 책상, 창가, 컵, 노트는 완벽하게 남아 있었고, 장면이 중간에 깨지는 일도 없었습니다.
제로에서부터 인물을 만들어내는 것보다 MiniMax H3의 장점과 약점이 더 잘 드러나는 소재였을 수도 있다고 말할 수 있습니다.
오늘의 메모
지난주, ‘카호’의 신작 소설 ‘나를 잊으려면 이렇게 굴러들어라’를 읽었다. 무라카미 하루키 특유의 섬세하고 몽환적인 분위기가 돋보였다. 특히, 주인공 ‘미나미’의 불안정한 내면 묘사가 인상적이었다.
‘미나미’가 ‘나를 잊으려면 이렇게 굴러들어라’라는 제목처럼, 자신의 기억을 억누르려 애쓰는 모습이 매우 현실적이고 공감됐다. 책을 읽고 난 후, ‘미나미’의 고뇌에 대해 깊이 생각하게 되었다.
이 책을 통해, 기억과 망각의 관계에 대해 다시 한번 생각해 보게 된다. 그리고, ‘미나미’처럼 자신의 삶을 긍정적으로 수용하고, 앞으로 나아가는 것이 얼마나 중요한지를 깨달았다.
‘나를 잊으려면 이렇게 굴러들어라’는 무라카미 하루키의 뛰어난 문장력과 섬세한 심리 묘사가 돋보이는 작품이다. ‘카호’의 다음 작품이 기대된다.
한 장의 정지 화면을 앞쪽으로 건네주자, MiniMax H3는 그 장면을 상당히 보존하면서 5초의 영상으로 만들 수 있었다.
이번 결과에서는 구도, 색감, 컵, 노트, 배경의 일관성이 양호합니다.
특히 이전보다 카메라가 안정적이었고 고정된 듯한 영상이 나온 점은 득이었습니다.
한편, 노트 페이지는 “가장자리가 약간 튀어나온” 것보다 훨씬 더 크게 움직였습니다.
湯気も見えますが、かなり控えめです。
그러한 점을 고려할 때, 이번에는 정지 이미지 유지에는 능숙하지만, 움직임의 강도는 다소 과장된 느낌입니다.
생성 시간은 25분 21초였습니다.
5초에 25분은 역시 무겁지 않습니다.
그래도 손에 든 한 장을 그대로 출발점으로 삼아 맥(Mac)만으로도 영상을 확장할 수 있다는 점이 흥미롭습니다.
다음으로 “이 장면에서부터 이 장면으로”의 전환을 요청했을 때, MiniMax H3가 자연스럽게 간격을 연결할 수 있는지를 시험합니다.
Tami
#미니맥스H3 #로컬 영상 생성 #맥북프로 #M5맥스 #MLX #생성AI #영상 생성
출처: note 원문
번역: Gemma 3(.44) 초벌 + 교정 62청크
원문 보기 | 출처: note.com