> 문화공감 > 문화TV 문화 디지털 영상

문화 디지털 영상한국문화정보원과 문화PD가 전달하는 문화 디지털 현장을 영상으로 만나보세요

  • 문화예술
  • 서울

[문화PD] 이제 누구나 할 수 있다고? AI로 뮤직비디오 만들어보기

제작
윤경식
재생시간
10:38
등록일
2023-08-08

1. 기획의도

생성형 AI의 열풍으로 여러 콘텐츠 제작 분야에도 활용 범위가 넓어지고 있다.

음악부터 문학, 영상제작과 편집 등에도 AI기술이 접목된 분야가 매우 광범위해지고 있는데,

이에 맞추어 생성형 AI가 작곡하고 음성합성기술을 활용한 AI가 노래를 부르며 AI가 써주는 시나리오를 기반으로 촬영하고 AI가 도와주는 편집으로 마무리하는 뮤직비디오 제작을 진행하여 일반인들도 쉽게 AI를 활용하여 콘텐츠 창작이 가능하다는 것을 여러 분야를 접목하여 알리고자 한다.

2. 자막 

00:00:00:06 - 00:00:03:24

여러분 안녕하세요!

문화피디 21기 윤경식 입니다

 

00:00:04:07 - 00:00:06:21

최근에 ‘chat GPT’ 많이 들어보셨죠

 

00:00:06:27 - 00:00:09:18

그런 것들을 포함해서 과거의 알파고라든지

 

00:00:09:25 - 00:00:12:16

굉장히 많은 종류의 ai가 쏟아져 나오고 있습니다

 

00:00:12:21 - 00:00:17:09

ai가 그림도 그리고 음악도 만들고 글도 쓰고 말도 하고 대화도 되고

 

00:00:17:29 - 00:00:21:24

ai가 어디까지 가는 것인가... 하는 생각이 들었습니다

 

00:00:21:27 - 00:00:23:12

그래서 준비했습니다

 

00:00:23:12 - 00:00:27:07

오늘은 ai와 함께 간단히 그리고 빠르게

 

00:00:27:23 - 00:00:31:05

뮤직비디오를 제작해보고 관련한 이야기를 조금 나눠보려고 하는데요

 

00:00:32:05 - 00:00:34:15

chat GPT에게 좀 작곡을 부탁을 해서

 

00:00:34:29 - 00:00:39:13

음악을 만들고 마저 이야기를 이어나가보도록 하죠

 

00:00:39:13 - 00:00:49:22

그럼, 지금부터 시작하겠습니다

 

00:00:53:18 - 00:00:56:28

인공지능에 대한 이야기를 나눠볼 건데요

 

00:00:57:11 - 00:00:59:00

이렇게 오늘 두 분을 모셨습니다

 

00:00:59:00 - 00:01:01:08

안녕하세요~

 

00:01:01:26 - 00:01:05:29

제가 오늘 어떤 걸 하고 싶어서 이 분들과 함께 하게 되었냐면요

 

00:01:06:18 - 00:01:09:08

지금 현재까지 나와 있는 기술로 우리가 어디까지

 

00:01:09:08 - 00:01:12:26

ai의 도움을 받으면서 뭔가 컨텐츠를 만들어낼 수 있을까?

 

00:01:13:11 - 00:01:17:00

를 주제로 오늘 한번 ai의 힘을 빌려서

 

00:01:17:11 - 00:01:20:01

간단히 곡을 한 번 만들어볼까 싶습니다

 

00:01:20:14 - 00:01:25:01

예를 들면 저희가 보통 곡을 만들 때 굉장히 오랜 시간이 걸리지 않습니까?

 

00:01:25:06 - 00:01:25:29

그렇죠

 

00:01:25:29 - 00:01:29:18

그러면 저희는 또 chat GPT의 힘을 빌릴 거니까요

 

00:01:29:21 - 00:01:32:12

오늘 또 목소리를 빌려주실

 

00:01:32:22 - 00:01:36:22

영주 님이 부르고 싶은 노래가 어떤 노래일까

 

00:01:36:22 - 00:01:37:08

한 번(이야기를 해 보죠)

 

00:01:37:21 - 00:01:40:24

저는 요즘 미래에 대한 고민이 진짜 많아요

 

00:01:40:24 - 00:01:44:25

많은 대학생 분들이 저와 같은 고민을 가지고 계실 것 같은데

 

00:01:45:10 - 00:01:48:00

그래서 앞으로 어떻게 나아가야 될지

 

00:01:48:09 - 00:01:51:17

그 꿈과 그런 미래에 대한 희망에 대한

 

00:01:51:26 - 00:01:55:24

그런 곡을 한번 불러보면 되게 공감도 많이 가고 좋을 것 같네요

 

00:01:56:19 - 00:01:59:27

그렇다면 chat GPT와 함께 시작을 해보도록 하겠습니다

 

00:02:00:09 - 00:02:02:08

자 이쪽에 chat GPT가 켜져 있고요

 

00:02:02:08 - 00:02:05:27

청춘의 미래에 대한 고민을 주제로 한 여성 발라드를 작곡해 줘라고

 

00:02:05:27 - 00:02:06:28

입력이 되어 있죠

 

00:02:07:29 - 00:02:11:15

이제 클릭 한 번을 해 주게 되면

 

00:02:11:15 - 00:02:15:01

우선 가사 먼저 나오는 것 같네요

 

00:02:16:15 - 00:02:19:08

그럼 이 노래의 코드를

 

00:02:20:15 - 00:02:23:15

코드도 같이 작성해 줘

 

00:02:29:29 - 00:02:32:18

‘C 장조에 맞춰서 작성을 했다고 하네요

 

00:02:34:04 - 00:02:35:17

~

 

00:02:38:00 - 00:02:39:11

거침없이 써내려 가네요

 

00:02:39:11 - 00:02:42:07

아주 한 두 마디 했는데 그냥 끝나버렸네요

 

00:02:43:23 - 00:02:46:21

이걸 가지고 한 번 피아노를 쳐볼까요 그러면?

 

00:02:47:05 - 00:02:51:29

네 저희가 방금 생성된 chat GPT의 코드와 가사를 가지고

 

00:02:51:29 - 00:02:53:11

그대로 와 봤어요

 

00:02:53:11 - 00:02:56:03

과연 인공지능의 수준이 어디까지 발전했는지

 

00:02:56:12 - 00:02:58:04

한번 테스트를 해보도록 하겠습니다

 

00:02:58:04 - 00:02:59:19

코드 한 번 그럼 쳐 볼까요?

 

00:03:09:12 - 00:03:13:24

생각나는 대로 멜로디를 얹어가면서 연습을 해봐도 될 것 같습니다

 

00:03:25:19 - 00:03:26:12

어렵네요

 

00:03:26:12 - 00:03:31:02

이렇게 절반 정도 불러본 것 같죠?

 

00:03:32:05 - 00:03:35:07

소감이 어떠신가요?

 

00:03:35:07 - 00:03:38:04

코드 진행 자체가 되게 자연스러운 것 같아요

 

00:03:40:27 - 00:03:45:02

근데 거기에 멜로디를 하는건 어쨌든 저희의 몫이기 때문에

 

00:03:45:16 - 00:03:49:18

그게 즉각적으로 나오기 에는 좀 무리가 있었던 것 같고

 

00:03:50:07 - 00:03:50:15

 

00:03:50:15 - 00:03:53:12

그런데 전체적으로 가사도 그렇고 코드도 그렇고

 

00:03:53:20 - 00:03:56:17

굉장히 완성도 있는 곡이 이제...ㅎㅎㅎ

 

00:03:56:17 - 00:03:57:28

진심이신거죠?

 

00:03:57:28 - 00:04:01:06

(완성된) 틀이 나온 것 같아서 이거에 맞춰서 좀 더

 

00:04:01:06 - 00:04:02:27

멜로디를 입혀보면 좋을 것 같아요

 

00:04:02:27 - 00:04:04:18

(피아노를) 쳐 보신 입장에서는 어떠셨나요?

 

00:04:04:29 - 00:04:07:07

뭐 굉장히 무난하다...

 

00:04:07:26 - 00:04:09:09

보편적으로 많이(쓰는)

 

00:04:09:09 - 00:04:11:15

가사가 부족한 측면은 조금 있는 것 같죠?

 

00:04:11:23 - 00:04:12:14

네 그런 것 같습니다

 

00:04:12:14 - 00:04:16:12

좀 그런 측면이 있는 거 같은데... 그러면 이거대로 한번 픽스를

 

00:04:16:23 - 00:04:17:18

해 볼까요? 그러면?

 

00:04:17:18 - 00:04:19:04

네 좋습니다

 

00:08:18:09 - 00:08:20:19

안녕하세요, 저희는 Selvas ai 이고요

 

00:08:20:19 - 00:08:21:21

‘Selvas ai’

 

00:08:21:21 - 00:08:25:18

인공지능기업 중 국내 1호로 상장한 인공지능 전문 기업입니다

 

00:08:26:07 - 00:08:29:09

저희는 음성인식, 음성합성, 영상지능

 

00:08:29:09 - 00:08:33:00

필기 인식 등 다양한 HCI 원천 기술을 보유하고 있는데요

 

00:08:33:08 - 00:08:36:08

ai 기술과 데이터를 기반으로 헬스케어, 교육

 

00:08:36:08 - 00:08:39:08

금융, 법률 등 다양한 도메인과의 융합을 통해

 

00:08:39:19 - 00:08:43:16

ai 디지털 트랜스포메이션을 선도하는 회사로 성장해 나가고 있습니다

 

00:08:43:23 - 00:08:48:09

저는 Selvas ai의 음성합성 랩에서 가창 합성과 음성 합성

 

00:08:48:09 - 00:08:50:27

기술을 담당하고 있는 유은택매니저 입니다

 

00:08:52:12 - 00:08:55:15

쉽게 말하면 ai가 노래를 불러주는 기술인데요

 

00:08:55:15 - 00:08:58:15

멜로디와 가사를 ai한테 입력을 해주면

 

00:08:58:17 - 00:09:01:18

ai가 노래를 부르는 목소리로 만들어주는 기술입니다

 

00:09:01:19 - 00:09:03:00

(Selvas ai) 교육사업부가 있어요

 

00:09:03:00 - 00:09:05:09

교육사업부와의 기술 연계를 통해서

 

00:09:05:09 - 00:09:08:02

교육 콘텐츠를 다양화하기 위해서 개발을 시작했는데요

 

00:09:08:07 - 00:09:11:24

주기율표를 외운다거나 이럴 때 단순하게 암기를 하는 것보다

 

00:09:11:24 - 00:09:14:23

노래를 통해서 외우면 훨씬 더 잘 외워지잖아요

 

00:09:14:26 - 00:09:19:05

그래서 암기내용을 노래로 만들어보고 교육 콘텐츠로 제작해보고 싶어하시는

 

00:09:19:05 - 00:09:20:21

분들이 실제로 많이 계셨고요

 

00:09:20:21 - 00:09:24:07

저희도 만들어보면 재미있을 것 같아서 개발을 시작하게 되었습니다

 

00:09:24:08 - 00:09:28:07

사람이 직접 녹음하지 않아도 ai가 악보와 가사에 맞춰서

 

00:09:28:07 - 00:09:29:25

노래를 할 수 있는데요

 

00:09:29:25 - 00:09:32:09

ai보이스 오디오 콘텐츠 제작 서비스인

 

00:09:32:20 - 00:09:35:03

‘audiro’를 운영하고 있습니다

 

00:09:35:09 - 00:09:37:24

실제로 유튜버 분들이 콘텐츠 제작을 하시거나

 

00:09:38:10 - 00:09:41:22

ai 보이스 음원을 만들어서 많이 사용을 하고 계시고요

 

00:09:41:23 - 00:09:43:23

보이스 오디오북 제작도 가능하여서

 

00:09:43:23 - 00:09:47:11

저희는 지금 다양한 출판사와 협업을 진행하고 있습니다

 

00:09:47:12 - 00:09:50:03

아직 그래도 가야할 길이 많이 멀긴 한데요

 

00:09:50:04 - 00:09:52:18

점점 ai 기술이 사람이

 

00:09:52:29 - 00:09:56:28

실제로 발성하거나 만들어낸 것과 구분하기가 힘들 정도로

 

00:09:57:03 - 00:09:58:19

정교해지고 있는 것은 사실인데요

 

00:09:58:19 - 00:10:00:20

그래서 한 편에는 말씀하신 것처럼

 

00:10:00:20 - 00:10:04:16

범죄에 악용될 수 있다이런 우려를 많이 나타내 주시고 계시는데요

 

00:10:04:25 - 00:10:07:15

저희도 그런 것들을 충분히 인지를 하고 있고

 

00:10:07:21 - 00:10:11:08

저희 뿐만 아니라 많은 분들이 ai의 결과물인지

 

00:10:11:15 - 00:10:15:09

사람이 만들어낸 건지 이런 판단하는 기술을 많이 연구를 하고 계십니다

 

00:10:15:18 - 00:10:19:28

여러 가지로 우려되는 것은 사실이지만 우리가 자동차를 탈 때

 

00:10:19:28 - 00:10:23:12

자동차 사고가 날까봐 우려가 된다고 자동차를 안 탈 수는 없잖아요

 

00:10:23:21 - 00:10:26:03

마찬가지로 ai기술 분야에서도

 

00:10:26:17 - 00:10:30:16

우려되는 점을 기술적으로 정책적으로 잘 고안해나가면

 

00:10:30:19 - 00:10:33:07

우리 사회에서 잘 정착되지 않을까 그렇게 생각합니다

 

00:10:34:23 - 00:10:40:25

저는 fine art, 순수예술 안에서 비디오하고

 

00:10:41:19 - 00:10:44:16

저는 필름 16mm 필름 8mm 필름

 

00:10:44:16 - 00:10:48:05

이런 걸로 실험영화작업을 하고 있는 작가입니다

 

00:10:48:15 - 00:10:49:13

네 반갑습니다

 

00:10:49:13 - 00:10:53:00

제 작업에서는 ai가 영향을 주지는 않지만

 

00:10:54:00 - 00:10:56:02

주변의 작가들이

 

00:10:56:11 - 00:10:59:03

ai를 활용해서 작업을 하는 작가들도 있고

 

00:10:59:12 - 00:11:03:08

그래서 이제 ai가 훨씬 자꾸자꾸 사용하기 편해지니까

 

00:11:04:18 - 00:11:08:08

이걸 가지고 뭘 해 봐야 되나 하는 그런 호기심 같은 것은

 

00:11:08:08 - 00:11:09:07

자꾸 생기는 것 같아요

 

00:11:09:07 - 00:11:11:07

왜냐하면 영화작업을 할 때 그죠

 

00:11:11:07 - 00:11:14:04

저는 저희는 약간 무빙이미지 아티스트라고도 하거든요

 

00:11:14:19 - 00:11:18:03

그런 이미지를 만들 때 내가 막 촬영하고

 

00:11:18:03 - 00:11:22:04

내가 찍고 모든 걸 다 하지 않아도 되는 방법이 있다면

 

00:11:22:20 - 00:11:27:04

그 방법을 고려해야 하지 않을까라는 생각을 하니까

 

00:11:27:04 - 00:11:31:06

사실 작가들이 조금씩

 

00:11:31:15 - 00:11:35:07

다른 사람이 작업을 참고하기도 하고 우리가 리서치를 하면서

 

00:11:35:12 - 00:11:38:09

다른 사람의 어떤 인포메이션을 사용하기도 하는 그런

 

00:11:38:09 - 00:11:42:00

어떤 비슷한 행태를 작가들이 하고 있지 않는 것 같진 않거든요

 

00:11:42:00 - 00:11:44:03

그 작가들도 되게 많이 다른 사람들 작업을 베껴요

 

00:11:44:03 - 00:11:47:13

(서로)다른 사람들의 아이디어 그리고

 

00:11:47:27 - 00:11:51:14

지금 막 유행하고 있는 어떤 환경 문제라든가

 

00:11:51:21 - 00:11:55:28

이런 것들도 사실 많은 사람들이 생각하고 있는 공통적인 데이터에

 

00:11:56:04 - 00:11:59:12

작가들은 관심을 갖는 거잖아요

 

00:11:59:28 - 00:12:02:19

그런 것처럼 어떤 이슈나 어떤 이미지나

 

00:12:02:19 - 00:12:06:00

이 눈에 확 쏠려가는 것들이 ai가 없다고 해서

 

00:12:06:18 - 00:12:08:26

그런 게 없는 것 같지는 않거든요

 

00:12:09:24 - 00:12:14:05

이게 되게 현실적으로 나를 위협한다거나 이런 건 아니지만

 

00:12:15:04 - 00:12:16:00

글쎄 모르겠어요

 

00:12:16:00 - 00:12:19:03

수업을 하면서

 

00:12:19:03 - 00:12:23:01

사실은 되게 이번에 놀랐던 게

 

00:12:23:10 - 00:12:25:29

학생들이 우리가 이제 무슨 작업을 할 때

 

00:12:26:18 - 00:12:28:24

뭘 만들겠다고 우리가 얘기를 하잖아요

 

00:12:29:08 - 00:12:33:13

그 때 어떤 친구가 이야기 줄거리를 갖고 왔단 말이에요

 

00:12:33:27 - 00:12:36:01

근데 그게 알고 보니까 이제 chat GPT

 

00:12:36:01 - 00:12:37:01

해 왔던 거더라고요

 

00:12:37:01 - 00:12:42:05

근데 나는 이제 그냥 내 생각에는 학생들이 개인 작업이니까

 

00:12:42:05 - 00:12:43:28

이거에 그렇게까지 ..막 그랬는데

 

00:12:43:28 - 00:12:46:10

ai를 썼다는 얘기를 들으니까 되게 (별로더라고요)

 

00:12:47:15 - 00:12:51:21

근데 이렇게 되게 쉽게 또 만들려고 하는구나

 

00:12:51:21 - 00:12:53:22

그래서 약간 세대 차이도 느껴지고

 

00:12:53:26 - 00:12:54:07

그렇죠

 

00:12:54:07 - 00:12:57:22

그게 내가 가져올 때는 좋지만

 

00:12:57:22 - 00:13:00:25

내 걸 남이 그냥 아무 대가 없이 가져간다고 생각하면

 

00:13:00:25 - 00:13:03:07

그거 굉장히 약오르는 일이기는 한 것 같아요

 

00:13:04:04 - 00:13:06:21

근데 뭐 사실

 

00:13:06:21 - 00:13:10:24

우리 옛날에 논문을 생각해보면 정말 논문 많이 베끼기도 하고

 

00:13:11:02 - 00:13:15:00

그런데 지금은 글자수라든가 이런 것도 사실 다 검열이 되잖아요

 

00:13:15:07 - 00:13:16:14

그 안에서

 

00:13:16:14 - 00:13:19:22

그러는 거의 룰이라든가(ai에 대한)검열이 만들어지지 않을까요?

 

00:13:20:12 - 00:13:22:14

사람들은 굉장히 머리가 좋으니까

 

00:13:22:14 - 00:13:24:01

그걸 가려내는 어떤 방법도

 

00:13:24:01 - 00:13:27:15

만들 것 같다는 생각이 들고 뭐 저작권이나 이런 것들처럼

 

00:13:27:24 - 00:13:32:12

나쁠까? 라는 생각이 들지만 ai라는 게 되게

 

00:13:33:01 - 00:13:35:26

마지막에 어떤 부분을 건드리는 거긴 하잖아요

 

00:13:36:03 - 00:13:39:28

인간이 어떤 독창적인 창의성을 건드리는 거니까

 

00:13:39:28 - 00:13:45:06

그건 사람만이 할 수 있는 건데 그걸 건드리는 건 되게 인간으로서

 

00:13:45:21 - 00:13:48:11

되게 많은 걸 빼앗기는 것 같은 느낌이 들는 건

 

00:13:48:11 - 00:13:50:01

맞고 지금 당장은 막

 

00:13:50:01 - 00:13:54:00

그게 그렇게 굉장히 디스토피아적으로 볼 것이냐에 대해서는

 

00:13:54:00 - 00:13:58:23

나는 조금 그렇게 되게 염려하지는 않겠으나

 

00:13:58:23 - 00:14:02:10

근데 이제 되게 많은 분야에서

 

00:14:02:10 - 00:14:06:18

또 사람 대신 할 수 있는 것들이 많아지면

 

00:14:06:18 - 00:14:09:09

사람들이 할 일을 빼앗기긴 하겠죠

 

00:14:09:09 - 00:14:11:11

그건 분명 한 것 같긴 해요

 

00:14:11:11 - 00:14:13:24

미술사 같은 걸 봐도

 

00:14:14:11 - 00:14:18:25

사진이라는 게 등장했을 때 되게 회화를 위협할 것이고...

 

00:14:19:22 - 00:14:23:00

그리고 아니면 또 되게 저급한 매체다 뭐 그랬지만

 

00:14:23:12 - 00:14:26:13

또 지금의 사진은 또 다르고 지금의 사진이나

 

00:14:26:23 - 00:14:29:19

그때 사진이라는 게 지금 너무 아날로그적인 부분이

 

00:14:29:19 - 00:14:33:01

너무 어떻게 보면 인간의 손을 굉장히 많이 타는 매치고

 

00:14:33:07 - 00:14:36:27

그래서 뭐 비디오라든가그런 전자미디어들이 나왔잖아요

 

00:14:37:08 - 00:14:40:27

그래서 우리 그런 걸로 사실은 또 새로운 작업을 하기는 했고

 

00:14:41:08 - 00:14:43:12

관련된 작가를 막 좀 찾아 봤어요

 

00:14:43:15 - 00:14:46:15

그런 친구들은 정말 뭐 chat GPT에서 만든 이야기,

 

00:14:46:15 - 00:14:49:23

ai가 만드는 이야기들을 가지고

 

00:14:50:23 - 00:14:53:08

전시구성을 하고

 

00:14:53:18 - 00:14:55:15

거기 안에 있는 캐릭터들을 만들고

 

00:14:55:15 - 00:14:59:15

그 캐릭터들을 스토리대로 굉장히 크게 구축을 하기도 하고

 

00:14:59:20 - 00:15:00:25

근데 모르죠

 

00:15:00:25 - 00:15:04:20

ai 작가가 정말 등장을 해서

 

00:15:04:20 - 00:15:07:13

이전에 있는 모든 그 질서를

 

00:15:10:01 - 00:15:13:27

그 질서를 이렇게 확 뒤엎을 수 있는 거니까

 

3. 사용음원

Phil Michalski - UI - Glitchy Counter(유료, artlist)

Rewind Kid - Eyes on the Prize(유료, artlist)

 

함께 볼만한 영상

공공누리

한국문화정보원이 창작한 [문화PD] 이제 누구나 할 수 있다고? AI로 뮤직비디오 만들어보기
본 저작물은 "공공누리" 제4유형:출처표시+상업적 이용금지+변경금지조건에 따라 이용 할 수 있습니다.

공감댓글

0
코멘트 입력
0/140
목록으로