① 어떤 상황에서 AI를 활용했나요?
제 아버지를 생각하며 노래를 만들었습니다. 알람에 겨우 일어나 출근하고 걱정은 혼자 삼키면서도, 아이 얼굴을 보면 다시 걷는 아빠의 하루를 담고 싶었습니다.
영상 편집은 올해 처음 시작했습니다. 처음에는 Gemini를 구독해 이미지를 먼저 만들고 그 이미지로 Flow(Veo) 영상을 뽑았습니다. 그런데 막상 보니 가사와 잘 어울리지 않았습니다. 캡컷으로 직접 붙여 보려 했지만 장면을 노래 박자에 어떻게 맞춰야 할지 몰라 2주 동안 붙잡고 있다가 결국 포기했습니다.
한 달쯤 전 Claude를 구독하고 AI와 쇼츠 만드는 과정을 하나씩 익히다가 그때 접어 둔 뮤직비디오가 다시 떠올랐습니다. 가사는 제가 쓰고 Claude와 함께 다듬었고, 곡은 수노로 만들었습니다.

② 어떤 AI를 어떻게 활용했나요?
일을 나눠 맡긴 'AI 팀'으로 만들었고, 정하고 확인하는 일은 제가 맡았습니다.
1. 노래 분석(무료, 내 컴퓨터): librosa로 빠르기(약 143)와 마디를 재고, Whisper로 가사가 몇 초에 나오는지 받아 적었습니다. 후렴은 받아 적기가 틀려 가사 원문을 보며 시간을 맞췄습니다.
2. 장면 계획(Claude): 가사 한 줄마다 장면을 정하고 차가운 새벽에서 시작해 아이를 떠올리면 따뜻한 빛으로, 마지막은 해돋이로 가는 색 흐름을 짰습니다.
3. 같은 아빠 지키기(ChatGPT 그림): AI로 만든 가상 인물 시트를 먼저 만들고 새 장면은 그 시트에 맞춰 옷과 체형, 머리 모양을 똑같이 그렸습니다. 얼굴은 되도록 뒷모습과 손, 그림자로 대신했습니다. 얼굴이 나오는 예전 Flow 영상과 섞여도 같은 사람으로 보이게 하기 위해서입니다.
4. 움직임(Wan 2.1, 내 컴퓨터): 멈춘 장면 그림을 실제로 움직이게 만들었습니다(최종판 8장면). 포기했을 때 뽑아 둔 Flow 영상 10개도 재료로 다시 썼습니다.
5. 박자 편집(Claude가 만든 편집표 + 리모션): 2주 동안 막혔던 바로 그 부분입니다. 컷마다 시작 시간과 재료, 속도를 적은 편집표를 만들어 장면이 마디가 바뀌는 자리에서 넘어가게 했습니다.
6. 검수: 제가 보고 지적한 뒤, 만든 AI가 아닌 다른 AI(ChatGPT)에게 컷 목록과 시간을 주고 채점을 받아 고쳤습니다.
한 장면을 예로 들겠습니다. 첫 판을 보고 제가 "너무 중복"이라고 했습니다. 편집표를 열어 보니 30컷에 재료가 11개뿐이라 같은 장면이 거의 세 번씩 나오고 있었습니다. 재료를 한 번씩만 쓰도록 표를 고치고 빈자리는 새 그림으로 채워 다시 만들었습니다.

③ 활용 결과 어떤 변화가 있었나요?
전에는 2주를 붙잡고도 한 편으로 잇지 못했습니다. 이번에는 사흘 만에(10월 23~25일) 3분 22초, 46컷에 가사 자막까지 넣은 뮤직비디오를 완성해 유튜브에 올렸습니다. 포기하며 남겨 둔 Flow 영상 10개도 이번 뮤직비디오에 다시 들어갔습니다.
- 다섯 번 고쳤습니다. 중복을 없앤 다음, 다른 AI가 6.5/10을 주며 "알람이 5초 뒤에야 나와 시작이 약함", "아이 웃는 얼굴 가사에 아이가 안 나옴", "2절 33초가 정지 그림뿐"이라고 짚은 부분을 반영했습니다. 마지막으로 후렴 컷을 실제 가사가 시작되는 자리에 맞추고 자막을 넣었습니다.
- AI의 말을 모두 따르지는 않았습니다. 움직이는 장면으로 바꿀 후보였던 운동화 끈 장면과 차 안 장면은 멈춘 그림 그대로 두었습니다. 정지된 화면이 오히려 여운을 남길 수 있다고 판단했기 때문입니다.
- AI 구독 비용을 제외하고 따로 든 돈은 0원입니다. 노래 분석과 그림 움직이기(장면당 평균 약 14분)는 내 컴퓨터에서 무료로 했고, 장면 그림 46장은 쓰던 ChatGPT 요금제 안에서 그렸습니다.

④ 나만의 방식 또는 개선 포인트는 무엇인가요?
- 인물 시트를 먼저 만들고 얼굴은 아꼈습니다. 옷과 체형을 시트로 고정하고 얼굴 대신 뒷모습과 손으로 보여 주니, 장면이 바뀌어도 같은 아빠로 보였습니다.
- 편집은 표로 했습니다. 편집표만 고치면 영상이 다시 만들어지므로 지적 하나를 고치려고 처음부터 다시 할 필요가 없었습니다. 다섯 판의 기록도 그대로 남아 있습니다.
- 제 눈과 다른 AI의 눈을 함께 썼습니다. 만든 AI가 아닌 다른 AI에게 채점을 받으니 제가 놓친 부분이 보였습니다.
- 실패에서 규칙을 만들었습니다. 그림 움직이기와 영상 렌더를 동시에 돌렸다가 그래픽카드가 멈춘 뒤로는 무거운 작업을 하나씩만 돌립니다.
- 권리와 표시를 챙겼습니다. 곡은 수노 유료(프로) 요금제 기간에 만들어 상업적으로 쓸 권리를 받았습니다(무료 요금제 곡은 비상업용만 가능). AI 결과물은 저작권 보호가 보장되지 않기 때문에 제가 쓴 가사와 AI가 만든 부분을 나눠 밝혔습니다. 인물은 실존 인물이 아닌 AI로 만든 가상 인물이며, 유튜브 설명에도 AI로 만든 영상이라고 적었습니다.
- 한계도 있습니다. 다른 AI의 채점은 한 번 받은 결과라 정답이 아니라 참고로 썼고, 예전 Flow 영상 속 얼굴과 새로 그린 아빠가 완전히 같지는 않습니다.

⑤ 다른 사람도 따라 할 수 있나요?
네. 노래 한 곡과 인물 그림 한 장이면 시작할 수 있습니다.
1. 가사 줄마다 장면 적기: 가사를 한 줄씩 붙여 넣고 "줄마다 어울리는 장면을 한 문장씩 적어 줘"라고 하면 장면 계획표가 나옵니다.
2. 인물 시트부터 만들기: 주인공 한 명을 앞, 뒤, 옆에서 그린 시트를 먼저 만들고 장면 그림을 그릴 때마다 그 시트를 함께 넣습니다. 얼굴을 뒷모습이나 손으로 대신하면 장면이 바뀌어도 같은 사람으로 보이게 합니다.
3. 박자에 맞춰 붙이기: 장면은 마디가 바뀌는 자리에서 넘기면 됩니다. 박자 분석 도구가 없다면 노래를 들으며 박자가 바뀌는 시간을 직접 적어도 충분합니다.
4. 다른 AI에게 채점받기: 다 만든 뒤 만들지 않은 AI에게 컷 목록과 시간을 주고 "구성, 흐름, 완급, 가사와 화면이 맞물리는지 냉정하게 평가해 줘"라고 묻습니다. 저는 이 단계에서 시작 5초가 약하다는 것을 알았습니다.
5. 고칠 것은 표로: 컷마다 시작 시간과 재료를 적어 두면, 지적이 나와도 그 줄만 고치면 됩니다.
더 가볍게는 1번과 4번만 해도 효과가 큽니다. 뮤직비디오가 아니어도 여행 영상이나 가족 기념 영상, 쇼츠에 같은 순서를 쓸 수 있습니다. 다만 노래 AI는 요금제마다 상업적 이용 가능 여부가 다르므로 공개하기 전에 꼭 약관을 확인하시기 바랍니다.
장면 계획표와 편집표 변화, 다른 AI의 채점 내용은 첨부 PDF에 그대로 넣었습니다.
전체 영상: https://youtu.be/gN85l7whL0E