NVIDIA는 방송 산업용 AI 툴 컬렉션으로서 “NVIDIA AI For Media”를 전개하고 있습니다.
이 NVIDIA AI For Media에 여러 개의 새로운 AI 툴이 추가되었습니다.
NVIDIA Brings Real-Time AI to Broadcast, Sports and Global Streaming at IBC | NVIDIA Bloghttps://blogs.
nvidia.
com/blog/ibc-news-2026/NVIDIA AI For Media는 AI 생성 콘텐츠 식별 툴 “Synthetic Video Detector”를 비롯하여 방송 산업에 유용한 툴을 모아놓은 컬렉션입니다.
2026년 9월에 새롭게 발표된 새로운 툴은 다음과 같습니다.
◆NVIDIA 3D Body PoseNVIDIA 3D Body Pose는 영상에 등장하는 인물의 “관절의 위치와 각도”를 추정하고, 2D 형식과 3D 형식의 구조화된 데이터로 변환하는 툴입니다.
피사체에 마커를 설정하지 않더라도 모션 데이터를 구축할 수 있어, “선수의 움직임을 추적하여 리플레이 영상을 강화하거나, 애니메이션 등의 콘텐츠 제작에 활용하는” 등의 활용 방법이 제안되고 있습니다.
◆비디오 프레임 생성(VFG)VFG는 생성 AI를 사용하여 비디오의 프레임 간에 새로운 프레임을 삽입하여 움직임을 부드럽게 만들 수 있는 도구입니다.
비디오의 프레임 레이트를 2~4배로 높일 수 있으며, “스포츠 리플레이의 6배 슬로우 모션”을 만드는 것도 가능합니다.
더욱이 8배 슬로우 모션의 제작에 대응하기 위해 개발이 진행되고 있습니다.
◆NVIDIA 비디오 슈퍼 레졸루션(VSR)VSR은 AI를 사용하여 비디오를 확대하는 도구입니다.
단순히 확대하는 것뿐만 아니라, “노이즈”, “보케”, “압축 아티팩트”를 저감할 수 있습니다.
처리 내용은 실시간 처리 모드와 고품질 처리 모드에서 선택할 수 있습니다.
또한, 10비트 포맷의 비디오에도 대응합니다.
◆NVIDIA 트루HDRNVIDIA TrueHDR는 SDR 비디오를 HDR 비디오로 실시간 변환하는 도구입니다.
대비비를 유지하면서 밝기를 조절할 수 있으며, 최대 약 2000니트의 영상 표현을 실현합니다.
◆NVIDIA 립싱크NVIDIA LipSync는 비디오에 나타나는 인물의 입의 움직임을 입력 음성 맞게 변화시키는 리프신크 도구입니다.
◆액티브 스피커 감지(Active Speaker Detection)Active Speaker Detection은 음성 파일에 포함된 여러 화자를 식별하는 도구입니다.
NVIDIA LipSync와 Active Speaker Detection을 결합함으로써 실시간 번역 및 리프신크 버블링 등이 가능해집니다.
◆Studio VoiceStudio Voice는 녹음 데이터에 포함된 잡음 및 굴절음을 감소시킬 수 있는 도구입니다.
NVIDIA AI For Media에 대한 자세한 내용은 다음 링크에서 확인할 수 있습니다.
NVIDIA AI For Media | NVIDIA Developer https://developer.nvidia.com/topics/ai/generative-ai/ai-for-media
원문 보기 | 출처: Gigazine