NVIDIA Broadcast通过AI驱动功能增强直播和远程工作

realtime news  Jun 27, 2024 11:53  UTC 03:53

1 Min Read

NVIDIA推出了最新版本的Broadcast应用程序,旨在通过先进的AI驱动功能提升直播和远程工作的质量。根据NVIDIA博客的介绍,这款免费应用程序利用RTX GPU上的Tensor Cores来提供专业级别的音频和视频增强。

流媒体的梦想

历史上,高质量的直播往往需要昂贵的硬件配置,通常需要双PC配置来分别处理游戏和编码任务。NVIDIA Broadcast通过利用NVENC(NVIDIA GPU上的专用硬件视频编码器)改变了这种局面,它处理编码任务,使系统的其余部分能够保持最佳性能。这项创新得到了流行的直播应用程序如Open Broadcaster Software(OBS)的支持,使得像Twitch和YouTube这样的平台上的新一波主播成为可能。

此外,NVIDIA Maxine提供了免费AI驱动的功能,如虚拟绿屏和基于网络摄像头的增强现实跟踪,消除了对昂贵物理设备的需求。这些功能在2019年TwitchCon上首次亮相,现已整合到NVIDIA Broadcast应用程序中。

现在展示:NVIDIA Broadcast

NVIDIA Broadcast提供了一套AI增强功能,旨在提高各种用例的音频和视频质量。主要功能包括:

  • 噪音和回声消除: AI消除麦克风和输入音频中的不需要的背景噪音。
  • 虚拟背景:功能如背景移除、替换和模糊,使用户无需昂贵设备即可自定义背景。
  • 眼神接触: AI使得角色看起来像是在直接看摄像头,即使他们没有。
  • 自动框架:动态跟踪运动并自动裁剪和放大移动物体。
  • 暗角:在摄像机图像的角落应用暗化效果,以获得视觉对比和风格感。
  • 视频噪声消除:在低光条件下清除视觉噪声,提供更清晰的图像。

该应用程序在Windows中创建了虚拟相机、麦克风或扬声器,使用户可以一次性设置设备并在多个应用程序中使用,包括Discord、Google Meet、Microsoft Teams、OBS Studio、Slack、Webex和Zoom。NVIDIA Broadcast的AI网络在NVIDIA GeForce RTX、TITAN RTX、NVIDIA RTX或Quadro RTX GPU上的专用Tensor Cores上实时运行。

NVIDIA Broadcast背后的技术也作为软件开发工具包提供给应用程序开发人员。像Elgato这样的公司和独立开发人员已经将这些AI功能整合到他们的产品中,进一步扩展了NVIDIA AI进步的覆盖范围和实用性。

(不)听即相信

自发布以来,NVIDIA Broadcast已获得广泛采用。Twitch名人Mr_Vudoo和YouTube主持人Unmesh Dinda都称赞了该应用程序的功能。Dinda在极端条件下演示了该应用程序的降噪功能,即使在高噪音背景下,它仍然有效。Tom's Hardware主编Avram Piltch也测试了该应用程序,确认了其过滤各种环境声音的能力。

NVIDIA Broadcast对远程工作也有益。它通过提供背景移除等功能增强了视频通话,在专业设置中受到用户的好评。

了解更多信息并下载应用程序,请访问NVIDIA Broadcast页面。



Read More