Google의 인공지능 관련 기업 'Google DeepMind'가 2023년 11월 16일, 음악 생성에 특화된 AI 모델 'Lyria'와 이를 사용하여 음악 제작이 가능한 2개의 툴 세트 'Dream Track', 'Music AI Tools'를 발표했습니다.
Transforming the future of music creation - Google DeepMind
Transforming the future of music creation
Announcing our most advanced music generation model and two new AI experiments, designed to open a new playground for creativity
deepmind.google
An early look our AI Music experiment - YouTube Blog
An early look at the possibilities as we experiment with AI and Music
Today we’re sharing a sneak peek at our first set of AI-related music experiments - Dream Track for Shorts and Music AI tools – built in collaboration with Google DeepMind.
blog.youtube
음악에는 비트나 음계, 하모니 등 방대한 양의 정보도 포함되어 있기 때문에, 이전의 AI 모델은 긴 소리의 시퀀스를 생성하기 어려웠습니다. Google DeepMind는 "음악에는 여러 사람의 목소리와 악기 음색이 동시에 포함되어 있기 때문에 음성을 만드는 것보다 훨씬 난도가 높습니다."라고 코멘트.
2023년 11월 16일 Google DeepMind가 발표한 AI 모델 'Lyria'는 악기만으로 연주된 악기와 보컬을 포함한 음악을 고품질로 생성할 수 있습니다. 또한, 유저가 출력할 스타일이나 퍼포먼스를 상세하게 컨트롤할 수 있도록 하는 것이 뛰어나다는 것.
Lyria를 활용할 수 있는 도구 세트로서 Google DeepMind는 'Dream Track'이라는 도구를 시험적으로 발표했습니다. Dream Track에서는 사용자가 만들고 싶은 음악의 장르, 분위기, 주제를 입력하고 보컬의 근원이 될 아티스트를 선택하기만 하면 YouTube 쇼츠를 위한 최대 30초의 음악을 생성할 수 있습니다.
보컬의 기초가 되는 아티스트에는 가수 알렉스 벤자민 씨, 찰리 푸스 씨, T-Pain 씨 등 9명이 참여하고 있습니다.
다음은 Dream Track을 사용하여 생성된 악곡의 데모 영상입니다. 이 악곡에는 AI가 생성한 찰리 푸스의 목소리와 스타일이 사용되고 있습니다.
Introducing Dream Track - an experiment on YouTube Shorts - featuring Charlie Puth - YouTube
T-Pain의 목소리나 스타일을 바탕으로 생성된 악곡입니다.
Introducing Dream Track - an experiment on YouTube Shorts - featuring T-Pain - YouTube
Dream Track은 2023년 11월 16일부터 일부 제작자를 대상으로 한 테스트를 거쳤습니다.
Google DeepMind는 'Music AI Tools'라는 도구를 Music AI Incubator 용으로 2023년 후반에 출시할 예정이라고 발표했습니다. Music AI Tools에서는 악기를 연주하지 않고 음악 트랙을 구축할 수 있습니다.
다음은 Music AI Tools를 이용한 데모 영상입니다. 이 영상에서는 스스로 드럼을 연주하는 휴먼 비트 박스로부터, 실제의 드럼과 같은 음악이 생성되는 모습이 소개되고 있습니다.
Introducing Music AI Tools - Transforming beatboxing into a drum loop - YouTube
Music AI Tools를 사용하여 마치 오케스트라가 연주하는 것처럼 변환한 영상.
Introducing Music AI Tool - Transforming singing into an orchestral score - YouTube
MIDI 키보드로 연주한 프레이즈를 코러스풍의 음악으로 변환.
Introducing Music AI Tools - Transforming chords from a MIDI keyboard into a realistic vocal choir - YouTube
Music AI Tools에서는 생성되는 음악에 대해 유저는 「피아노를 이용한다」나 「리버브를 건다」등 다양한 특징을 부여하는 것이 가능합니다. 이러한 조작에는 독자적인 인터페이스가 이용됩니다.
또한 Google DeepMind는 Lyria를 사용하여 생성된 음악에 대해 AI가 생성한 콘텐츠임을 나타내는 SynthID에 의한 디지털 워터마크가 들어간다고 보고하고 있습니다. Google DeepMind는 "SynthID를 이용한 워터마크를 포함함으로써 노이즈 합성, MP3 압축, 트랙 속도 변경 등이 이루어진 경우에도 AI로 생성한 콘텐츠를 식별할 수 있습니다. 덧붙여 이 워터마크는 인간의 귀에는 들리지 않기 때문에, 청음을 방해하는 일은 없습니다"라고 말하고 있습니다.
'AI · 인공지능 > AI 뉴스' 카테고리의 다른 글
| "AI 나레이터"가 개발자의 생태를 동물 다큐처럼 실시간 해설하는 영상이 화제 (70) | 2023.11.22 |
|---|---|
| OpenAI의 직원 90%가 '샘 알트만 복귀와 이사 전원 사임'을 요구하고 MS로 집단 이직 협박 (53) | 2023.11.22 |
| 움직이는 물체를 AI가 실시간으로 해석하는 오픈 소스 NVR 「Frigate」 (3) | 2023.11.21 |
| ChatGPT 개발자 OpenAI의 임시 CEO로 취임한 미라 무라티는 누구인가? (47) | 2023.11.21 |
| AI로 존 레논의 목소리만 꺼내 완성한 비틀즈의 마지막 신곡 'Now and Then' 뮤직비디오를 공개 (4) | 2023.11.19 |
| Amazon이 GPT-4를 넘는 2조 파라미터의 대규모 언어 모델 「Olympus」를 개발중 (1) | 2023.11.17 |
| 멜로디나 템포도 컨트롤 가능한 음악 생성 모델 「Music ControlNet」발표 (62) | 2023.11.16 |
| 구글 DeepMind가 1분 만에 10일간의 날씨를 예측할 수 있는 AI「GraphCast」를 발표 (52) | 2023.11.16 |
