영화가 개봉했던 2001년에는 상상에 불과했던 일들이 점차 현실이 되고 있다. 상황에 따라 알맞은 감정을 표현하는 인공지능(AI) 비서가 나오게 됐고, 코미디언처럼 다른 사람의 목소리를 그대로 따라 노래를 부르는 ‘모창 AI’ 기술도 개발되고 있다. 점차 인간과 같은 모습을 갖춰가는 AI 기술에 대해 알아보자.


일러스트 임성훈

AI 가수가 나가신다!

악보와 가사를 읽고 사람처럼 자연스럽게 노래를 부르는 AI를 국내 연구진이 개발 중이다. 서울대 융합과학기술대학원 음악오디오 연구실 이주헌 연구원이 연구 중인 ‘가창음성합성(SVS) 시스템’이 바로 그것.

이 연구원의 목표는 이 기술을 이용해 세상에 없는 목소리를 가진 ‘가상의 가수’를 탄생시키는 것이다. 일반인들이 부른 노래를 빅데이터 삼아 스스로 학습하는 이 AI는 현재 특정인의 목소리를 똑같이 따라 노래하는 것만 할줄 안다. 사람처럼 가사를 정확하게 발음할 수 있는 것은 물론이고 비브라토, 레가토와 같은 섬세한 음악적 표현도 구현한다.

“이번 정상회의를 계기로 한-아세안 스타트업(새로 생긴 벤처기업) 간 연결의 힘을 보여줄 것입니다.”

지난달 우리나라에서 열린 ‘2019 한-아세안 특별정상회의’의 부대행사 개막식에서 박영선 중소벤처기업부 장관이 영상에 등장해 이 같이 밝혔다. 방송 기자 출신인 그의 또렷한 발성이나 입가에 띤 잔잔한 미소 등으로 볼 때 의심할 여지없이 박 장관이었기에 그가 “저는 인공지능 박영선입니다”라고 밝히지 않았다면 딥페이크 기술로 제작된 영상 속 인물이라는 사실을 알지 못했을 것이다.

딥페이크는 특정 인물의 얼굴, 표정, 목소리, 억양 등을 AI 기술을 이용해 원하는 영상에 합성한 편집물을 말한다. 현실 세계에서는 사람과 똑 닮은 AI 로봇을 생산하는 것이 아직 어렵지만 적어도 영상 속에서는 실존하는 사람과 똑같은 모습을 한 가상의 인물을 구현할 수 있는 것. 본뜨고 싶은 인물의 동영상과 음성파일 등만 있다면 딥페이크 영상을 제작할 수 있다.