메타의 음성 생성 AI, Voicebox를 아시나요?
안녕하세요, 여러분. 오늘 소개하고자 하는 기술은 Meta에서 야심차게 개발한 음성 생성 분야에서의 차세대 인공지능, 'Voicebox'입니다. 여러분도 예상하셨겠지만, 이 기술은 오디오 편집부터 샘플링, 스타일링까지, 상당히 광범위합니다. 이번에 소개드리는 Voicebox는 그러한 작업을 편리하게 수행해 주는 생성 AI 모델입니다.
생각해 보시면 놀랍지 않나요? 크리에이터들이 오디오 트랙을 쉽게 편집할 수 있게 되고, 시각장애인이 친구의 메시지를 음성으로 들을 수 있게 되며, 여러분들도 자신의 목소리로 외국어를 말할 수 있게 되는 그런 세상이 올 수도 있다는 사실.
Voicebox의 가장 큰 특징 중 하나는 인컨텍스트 학습을 활용하여 특별히 학습되지 않은 편집, 샘플링, 스타일링 등의 음성 생성 작업을 수행할 수 있다는 점입니다. 이는 고품질의 오디오 클립을 생성하면서, 자동차 경적이나 개 짖는 소리 등의 노이즈를 제거하는 등 미리 녹음된 오디오를 편집할 수 있게 해줍니다. 이 모든 작업을 하면서도 오디오의 원래 콘텐츠와 스타일은 그대로 유지되죠.
Voicebox는 또한 6개 언어를 지원하여 다양한 언어로 음성을 생성할 수 있습니다. 이런 다목적 생성 AI 모델들은 가상 비서나 비플레이어 캐릭터(NPC)에게 자연스러운 음성을 제공하면서 메타버스에서의 새로운 가능성을 열어줄 것입니다.
'컨텍스트 내 텍스트 음성 합성'이라는 기능을 통해 Voicebox는 짧은 오디오 샘플을 이용해 오디오 스타일을 일치시키고 텍스트 음성 변환 생성을 수행할 수 있습니다. 또한 '음성 편집 및 노이즈 제거' 기능을 통해 소음으로 인한 중단된 부분이나 잘못 말한 단어를 쉽게 대체하거나 수정할 수 있습니다. 예를 들어, 개 짖는 소리로 인해 중단된 부분을 Voicebox에 지시하면 해당 부분을 자동으로 재생성해주는 식입니다.
더 나아가 '언어 간 스타일 전송' 기능을 통해 다른 언어로 된 텍스트를 읽을 수 있습니다. 이는 자연스럽고 진정성 있는 소통을 위한 중요한 도구가 될 수 있습니다. 마지막으로 '다양한 음성 샘플링'을 통해 다양한 데이터를 학습하며 더욱 사람처럼 말하는 음성을 생성할 수 있습니다.
Voicebox는 제너레이티브 AI 연구에서 중요한 진전을 이루고 있습니다. 앞으로도 계속해서 오디오 분야에 대한 탐구를 진행하며 다른 연구자들이 우리의 연구를 기반으로 발전시켜 나가는 것을 기대합니다.
이런 기술의 발전이 우리의 삶에 어떤 변화를 가져올지 상상하면 두근두근하지 않나요? 이제 우리의 목소리와 언어에 관한 기술이 그렇게 멀지 않은 미래에 우리 삶의 중심에 서게 될 것이라는 사실에 대해 우리 함께 생각해봅시다. Good luck and Keep learning!
AI에 대해 더 알고싶다면? 천재IT교육센터 AI·빅데이터 과정을 추천 드립니다! 현재 모집 중 (~8/31) 더 알아보기