NVIDIA 가 노이즈 제거 기능을 갖춘 AI 모델인 'NemotronLabs-RE-USE'를 공개했습니다. 이 모델은 콘텐츠 제작용 오디오 자원의 보정 및 음성 AI 모델 학습 데이터 생성에 유용하다고 알려져 있습니다. nvidia/NVIDIA-NemotronLabs-RE-USE · Hugging Facehttps://huggingface.co/nvidia/NVIDIA-NemotronLabs-RE-USE
NemotronLabs-RE-USE 는 961 만 개의 파라미터를 가진 AI 모델로, 입력된 오디오의 노이즈를 제거하여 WAV 형식으로 출력할 수 있습니다. 다국어 지원이 고려되어 설계되었으며, 언어에 관계없이 노이즈만 제거할 수 있습니다. 여러 화자의 목소리가 섞인 오디오에서는 메인 화자가 우선 처리됩니다. 아래 포스트에 포함된 영상을 재생하면 '로드 노이즈가 섞인 차량 내 녹음 오디오'나 '스피커에서 들리는 반향이 섞인 오디오'를 선명한 오디오로 변환할 수 있음을 확인할 수 있습니다.
소음 켜기 🔊 차이를 들어보세요. NVIDIA 연구원들이 개발한 새로운 오픈 소스 다국어 NemotronLabs RE-USE 모델은 배경 소음, 에코 및 기타 오디오 왜곡을 제거하여 목소리를 더 명확하게 만듭니다. 모든 것이 960 만 개의 파라미터로 가능합니다. 데모를 시도하고 모델을 다운로드하려면…pic.twitter.com/6WI8oj7u7t
X 에는 NemotronLabs-RE-USE 를 사용하여 일본어 목소리를 명확하게 하는 예가 게시되었습니다.
오픈 소스 잡음 제거 라이브러리인 NVIDIA 의 RE-USE 정말 멋집니다! 마지막에 언급된 것처럼 매우 많은 잡음을 넣어도 품질이 이 정도라면 정말 놀라울 정도입니다...pic.twitter.com/BbitZQl6Ln
NemotronLabs-RE-USE 는 다음 링크에서 오픈 모델로 배포되었습니다. 라이선스는 OpenMDW-1.1 입니다. nvidia/NVIDIA-NemotronLabs-RE-USE · Hugging Face https://huggingface.co/nvidia/NVIDIA-NemotronLabs-RE-USE 또한, 브라우저에서 실행할 수 있는 데모 앱도 다음 링크에서 공개되었습니다. RE USE - a Hugging Face Space by nvidia https://huggingface.co/spaces/nvidia/NVIDIA-NemotronLabs-RE-USE
원문 보기 | 출처: Gigazine