AI뮤직비디오 | 예상치 못한 충격적 결과! Weeknd의 'Blinding Lights' AI로 재구현 [MV] Dance the Night Official

[반드시] AInspire 유튜브 영상 중 3개에 '좋아요' 시청 소감 '댓글'을 달고 입장해주세요.
오픈채팅방은 아래 링크에서 입장 가능합니다.
https://open.kakao.com/o/gIAfY72g

오픈 채팅방에 들어오셔서 공지사항을 확인해주시면
'AI영상제작' 무료 전자책' 과 [구찌 광고 제작 과정] AI로 실사 퀄리티 영상 만들기에 사용된
프롬포트를 보내드립니다.

오픈채팅방에 오시면 한정으로 지속적인 업데이트와
다양한 무료 혜택, 이벤트를 지속 기획하고 있습니다.
프로필 링크를 통해서도 입장하실 수 있습니다.

| AI뮤직비디오
제가 가장 좋아하는 가수 'Weeknd - Blinding Lights'에서 아이디어를 얻어 AI로 만들어보았습니다. 더 멋진 원곡을 사용하고 싶었지만, 모든 콘텐츠를 AI로 제작하고 싶어 아쉽지만 제가 만든 음원을 사용했습니다.
그 제작 프로세스를 아주 간단히(?) 적어보겠습니다.

▶ AI 이미지 생성
'미드저니'와 '스테이블디퓨져'로 이미지를 생성합니다. 실제 촬영과 연출을 해본 사람이라면 구체적인 구도와 조명 환경을 세팅하는 일관된 텍스트 프롬프트를 작성할 수 있어 유리합니다. AI 이미지를 한 번이라도 생성하신 분들은 이상한 문자나 숫자가 들어가거나 기괴하게 생성된 이미지가 많다는 것을 경험하셨을 겁니다. 포토샵으로 이 부분을 합성해주고 마음에 들게 픽셀 유동화를 진행합니다.

▶ AI 모션 (Motion)
생성한 이미지를 haiper와 luma, runway의 특성에 맞게 텍스트 프롬프트를 이용해 모션을 적용해줍니다. haiper는 언급한 엔진 중 가장 성능이 떨어지지만, 클로즈업 상태에서 슬로우 모션이나 정지되어 있는 상태, 액체, 빛의 표현은 나쁘지 않습니다. 유료 구독하면 무제한으로 생성할 수 있기 때문에, 텍스트 프롬프트를 먼저 테스트 해보기 좋습니다.

상업적으로 작업할 때 제가 가장 신뢰하고 믿는 모션 AI는 현재 'luma'입니다. 현재 나와 있는 엔진 중에는 'runway gen3'보다 다이나믹은 떨어지지만 텍스트 프롬프트의 정확도는 가장 높습니다. 'runway gen3'가 image to image가 업데이트 된다면 그때 넘어가는 것을 추천드려요.

▶ AI 업스케일(Up Scale)
출력된 이미지 사이즈가 대부분 720p로 해상도가 매우 낮게 나오기 때문에 Topaz Video AI로 업스케일 작업을 진행합니다. 사진은 업스케일이 잘 되는 편이라 Topaz photo AI로 모든 이미지를 1차 4k 사이즈로 일괄 업스케일한 후 업스케일 된 이미지를 다시 위로 올려 AI 모션 툴로 돌려주어야 최상의 결과물을 얻을 수 있습니다.

▶ 편집
프리미어와 에프터이펙트로 편집을 진행합니다.
현재 AI의 모션이 매우 불안정하고 표현이 안 되는 부분이 많아 수작업으로 공간감을 보완해줍니다. 특유의 시네마 렌즈로 촬영한 느낌을 후반에서 적용하기에 Dehance 플러그인만큼 좋은 것이 없습니다.

AI 특유의 느낌을 없애기 위해 Print로 'kodak Endura Glossy Paper 종이 질감'을 추가했습니다. 이미지는 빛 번짐 효과를 시네마 필름처럼 표현하지 않는 편이라 Halation과 bloom을 35mm iso500씩 추가해줬고 대부분 작은 모바일로 보기 때문에 Film Grain을 16mm iso500로 평소보다 과하게 추가했습니다.

몇 장면은 Halation이 과해 보이지만 위 작업으로 더 실사처럼 부드러워진 컷이 더 많기 때문에 전체 톤&매너를 위해 개별 적용하지는 않았습니다. (이미지 생성과 업스케일을 거쳐 많이 샤픈해진 영상을 이 작을 통해 실사처럼 만듭니다)

아직 AI가 원시시대 수준이라 기획과 영상을 만드는 것보다 오류 처리와 변수에 대응하는데 시간이 더 오래 걸립니다. 현재 아쉬운 부분이 많더라도 최근 엄청난 속도의 변화가 있던 만큼 올해 말에는 더 큰 변화가 예상되기에 기대가 되는 것도 사실입니다. AI와 친해지는 과정을 더 기록해보겠습니다.

위 내용을 보니 너무 어려워 보이지만 수많은 시행착오를 하면서 많은 꿀팁을 찾아냈습니다. 계속 콘텐츠를 올리면서 하나씩 정보를 풀어보겠습니다.

더 쉽게 만들 수 있는 방법이 있습니다. 추후 그 노하우를 콘텐츠로 만들어 풀어보려 합니다. 도움이 될 수 있는 정보 많이 공유해보겠습니다. 감사합니다.

※ 영상의 음원은 제가 직접 제작하여 유통된 오리지널 음원입니다.