메타, 오디오 및 음악 자동 생성 AI 툴 ‘오디오 크래프트’ 공개

지난 2일 메타가 새로운 AI 툴 ‘오디오 크래프트’를 공개했다.

‘오디오 크래프트’는 텍스트를 실제적이고 고품질의 오디오와 음악으로 변환할 수 있도록 돕는 최신 AI 도구다. 이 툴을 통해 전문 음악가는 악기를 연주하지 않아도 새로운 작곡을 탐색할 수 있고, 인스타그램 숍 운영자는 인스타그램 최신 광고에 손쉽게 사운드트랙을 추가할 수 있다.

‘오디오 크래프트’는 뮤직젠, 오디오젠, AI 구동형 오디오 압축 기술 세 모델로 구동된다. 뮤직젠은 메타의 소유 혹은 라이선싱 된 음악을 토대로 텍스트 프롬프트를 기반 음악을, 오디오젠은 사용할 수 있는 사운드 효과로 텍스트 프롬프트 기반 오디오를 생성한다.

메타는 ‘오디오 크래프트’ 제작 과정 또한 공개했다. <메타> 블로그에는 ‘오디오크래프트’ 엔코덱 디코더의 개선 버전, 사전 훈련된 오디오젠의 정보가 수록됐다. 오디오젠은 개발자들이 환경음, 개 짖는 소리, 차량 경적 소리, 목재 바닥의 발걸음 소리와 같은 효과음을 생성할 수 있도록 도운 내용이다. 오픈소스로 공개된 ‘오디오 크래프트’ 코드는 실무자를 위한 것이며, AI 생성형 오디오와 음악 분야를 발전시키기 위함이다.

메타는 이번 툴에 대해 “‘오디오 크래프트’를 음악가와 사운드 디자이너를 위한 도구로 본다”며 “사람들이 자신의 작곡을 새로운 방식으로 빠르게 고민하고 개발할 수 있도록 돕고자 한다. ‘오디오 크래프트’로 어떤 작품들이 만들어질지 기대된다”라는 소감을 남겼다. 메타의 AI 툴 ‘오디오크래프트’의 자세한 구현 과정은 여기에서 확인할 수 있다.

🎵 Today we’re sharing details about AudioCraft, a family of generative AI models that lets you easily generate high-quality audio and music from text.https://t.co/04XAq4rlap pic.twitter.com/JreMIBGbTF

— Meta Newsroom (@MetaNewsroom) August 2, 2023