Offcanvas

AI / 신기술|미래 / 애플리케이션

구글 딥마인드, AI 기반 음악 창작 도구 공개

2023.11.20 김달훈  |  CIO KR
구글 딥마인드가 개발한 AI 음악 생성 모델(AI music generation model)인  리리아(Lyria)를 활용해 유튜브(Youtube)와 개발한 두 가지 실험적인 모델을 발표했다. 첫째는 드림 트랙(Dream Track)으로 만들고 싶은 내용을 입력하고 아티스트를 선택하면, 유튜브 쇼츠를 즉석에서 만들어준다. 둘째는 음악 AI 도구(Music AI tools)로 음악 문외한도 간편하고 쉽게 다양한 음악적 요소를 추가하거나 변형할 수 있도록 해준다.



만들고 싶은 음악 내용과 아티스트를 선택하면, 30초 분량의 사운드 트랙을 생성하는 유튜브의 드림 트랙(위). AI 음악 생성 모델 리리아로 개발된 모든 콘텐츠에는 신스ID로 생성한 디지털 워터마크가 삽입된다(아래). (자료 : Youtube & Google DeepMind)

"음악에는 엄청난 양의 정보가 포함되어 있다. 매 순간 모든 비트, 음표 및 보컬 하모니를 고려해야 한다. 긴 사운드 시퀀스를 생성할 때 AI 모델이 구문, 구절 또는 확장된 구절 전체에서 음악적 연속성을 유지하기가 어렵다. 리리아는 악기와 보컬을 사용하여 고품질 음악을 생성하고, 변환 및 연속 작업을 수행하며, 사용자에게 출력 스타일과 성능에 대한 보다 미묘한 제어 기능을 제공하는 데 탁월하다"라는 것이 구글 딥마인드 설명이다.

드림 트랙은 주제를 입력하고 원하는 아티스트를 선택하면, 유튜브 쇼츠에 들어갈 30초의 사운드 트랙을 만들어 준다. 예를 들어 '햇살 가득한 플로리다에서의 아침, R&B'라고 만들고 싶은 쇼츠 주제를 입력하고, 목록에서 원하는 아티스트를 선택하면 해당 아티스트의 스타일로 만들어진 오디오 트랙을 바로 만들 수 있다.

이렇게 생성되는 쇼츠의 사운드 트랙은 아티스트 목소리, 가사, 음악 등 모든 것을 생성 AI가 바로 만들어낸 것이다. 물론 드림 트랙에서 선택할 수 있는 아티스트는 유튜브와 파트너십을 맺은 사람들이다. 드림 트랙은 아티스트의 인기를 반영하는 새로운 채널이면서 팬들과 소통할 수 있는 새로운 방법이 될 수 있을지 주목할만하다.

음악 AI 도구는 더 무궁무진한 활약이 기대되는 생성 AI 도구다. 음악 AI 도구를 활용하면 흥얼 걸리는 소리만으로 멋진 음악을 만들고, 멜로디만으로 특정 악기의 연주음을 생성하고, 미디(MIDI) 키보드로 연주한 음악을 합창으로 변환하고, 보컬 트랙에 원하는 악기 반주를 추가할 수 있다. 한 마디로 음악을 만드는 고전적이고 전통적인 방법이 아닌 다양한 방법으로 음악을 창작하고 변형할 수 있다.

악보를 볼 줄 모르고 악기를 전혀 다루지 못하는 음악 문외한이나 초보자도 악기 세션을 만들고, 음악 스타일이나 악기를 전혀 다른 스타일과 악기로 변환하고, 자유롭게 악기나 보컬이 추가된 반주를 만들 수 있다는 것이 구글 딥마인드의 설명이다. 물론 음악 전문가들에게도 이러한 기능은 아주 유용하게 활용할 수 있는 매력적인 도구가 될 수 있다.

이렇게 생성된 음악에는 신스ID(SynthID)를 통해 사람의 귀에는 들리지 않지만 생성 AI로 제작한 것임을 알 수 있는 디지털 워터마크를 삽입한다. 신스ID는 시간이 지남에 따라 변화하는 주파수 스펙트럼을 2차원으로 된 시각적 스펙토그램으로 변환한 디지털 워터마크를 추가하며, 잡음, 압축, 트랙 속도 증가나 감소 등의 일반적인 수정을 거쳐도 유지된다. ciokr@idg.co.kr
CIO Korea 뉴스레터 및 IT 트랜드 보고서 무료 구독하기
Sponsored
추천 테크라이브러리

회사명:한국IDG 제호: CIO Korea 주소 : 서울시 중구 세종대로 23, 4층 우)04512
등록번호 : 서울 아01641 등록발행일자 : 2011년 05월 27일

발행인 : 박형미 편집인 : 천신응 청소년보호책임자 : 한정규
사업자 등록번호 : 214-87-22467 Tel : 02-558-6950

Copyright © 2024 International Data Group. All rights reserved.