2024년 11월 25일(어제), Nvidia의 공식 트위터 계정은 고급 생성 오디오 모델인 Fugatto의 출시를 발표했습니다. 이 모델은 사용자 입력을 기반으로 다양한 소리, 음악,以及语音。这个创新工具的独特之处在于它能够生成全新的声音，以前所未有的方式无缝融合各种音频效果。
오디오 생성의 새로운 시대: Nvidia Fugatto
Fugatto (Foundational Generative Audio Transformer Opus 1의 약자)는 영화, 게임, 음악 제작 등 다양한 창의적 요구를 충족하도록 설계되었습니다. 사용자는 텍스트와 오디오 프롬프트를 입력할 수 있으며, 이 모델은 짤막한 주제음부터 복잡한 사운드스케이프까지 생성할 수 있습니다. 이 모델은 25억 개의 매개변수를 보유하고 있으며, 다양한 장르의 수백만 개의 오디오 샘플을 사용하여 훈련되었습니다.
Nvidia Fugatto: 독특한 사운드 생성 기능
Nvidia Fugatto의 주요 기능 중 하나는 "이전에 들은 적이 없는" 소리를 생성할 수 있는 것입니다. 예를 들어, 개처럼 울부짖는 색소폰이나 야옹거리는 트럼펫을 생성할 수 있습니다. 이 기능은 ComposableART라는 기술에서 비롯되며, 이 기술은 모델이 훈련 중에 배운 다양한 지시를 결합할 수 있게 합니다. 이는 사용자가 깊은 베이스 펄스와 높은 피치의 트위트를 결합하는 등 복잡한 사운드 조합을 설명할 수 있으며, Fugatto는 이를 원활하게 생성할 수 있습니다.
Nvidia Fugatto: 기존 오디오 개선
새로운 소리를 생성하는 것 외에도, Nvidia Fugatto는 기존 트랙을 수정하는 데 뛰어납니다. 사용자는 노래에서 악기를 추가하거나 제거할 수 있으며, 보컬을 분리하거나 목소리의 감정적 톤과 억양을 변경할 수 있습니다. 이 유연성은 사운드 엔지니어와 음악가들이 복잡한 편집 기술이나 자원 없이도 구성물을 실험할 수 있게 합니다.
Nvidia Fugatto: 창작자들을 위한 실용적 활용
Fugatto는 다양한 산업에서 게임 체인저가 될 것으로 예상됩니다:
- 음악 제작: 음악가들은 다양한 스타일과 편곡에 대한 아이디어를 빠르게 프로토타이핑할 수 있습니다.
- 영화와 광고: 이 도구의 동적 음악 조정 능력은 영화의 배경음악을 만드는 데 이상적이며, 광고를 위한 맞춤 사운드트랙을 생성하는 데도 적합합니다.
- 게임: 게임 개발자들은 Nvidia Fugatto를 사용하여 게임 플레이와 함께 진화하는 몰입감 있는 사운드스케이프를 생성할 수 있습니다.
Nvidia의 응용 오디오 연구 매니저인 Rafael Valle는 모델의 목표를 강조했습니다: "우리는 인간처럼 소리를 이해하고 생성하는 모델을 만들고 싶었습니다." 이 인간 같은 이해력은 소프트웨어와의 직관적인 상호작용을 가능하게 합니다.
AI 오디오 생성기의 도전과 고려 사항
Nvidia Fugatto는 흥미로운 기회를 제공하지만, 사운드 디자인 직무의 미래에 대한 질문도 제기합니다. 이와 같은 AI 도구가 보편화됨에 따라, 전통적인 역할인 포리 아티스트가 도전에 직면할 수 있습니다. 그러나 Nvidia는 Fugatto가 대체가 아닌 보조 도구로 작용할 수 있으며, 전문가들이 창의성을 향상시키는 데 도움이 될 것이라고 제안합니다.
또한, AI 생성 콘텐츠와 관련된 저작권 문제에 대한 우려가 증가하고 있습니다. 많은 기업들이 훈련 데이터셋에서 저작권 소유물 사용과 관련된 법적 도전에 직면함에 따라, 업계는 이러한 복잡성을 신중하게 해결해야 합니다.
Nvidia Fugatto는 AI 오디오 생성 기술의 큰 발전을 대표합니다. 창의적인 가능성과 기술적 능력을 결합하여, Nvidia의 새로운 도구는 예술가와 프로듀서들이 미개척의 청각 영역을 탐험하도록 초대합니다.
AI 발전과 Fugatto와 같은 도구에 대한 자세한 내용은 AIPURE를 방문하여 인공 지능 혁신에 대한 포괄적인 정보를 확인하세요.
