无论是做直播,或者远程办公视频或者语音会议的朋友,肯定都经历过诸如背景凌乱,背景声音嘈杂,从而导致直播或者视频会议质量下降的困扰。外部的环境因素很难去控制,那么如何去提升直播和远程办公会议的质量,这就不得不介绍NVIDIA Broadcast这一神器了!
NVIDIA Broadcast:提升直播与线上会议质量
NVIDIA Broadcast是专为主播和线上会议而来的一款,旨在利用 AI 的强大功能,帮助用户进一步提升直播和视频会议的质量。通过借助RTX GPU中的Tensor Core,能很好的解决主播或者远程办公人士在画面和声音这两个方面的需求。
NVIDIA Broadcast通过捕获玩家的摄像头、麦克风和扬声器或者耳机设备,对其进行AI人工智能处理,设置为一个虚拟设备供OBS等直播串流软件调用。当转换为AI智能设备后,采用RTX GPU进行AI计算,通过各种强大的功能,让轻松在家搭起属于自己的工作间。
旧版页面,可以和接下来新版进行对比
最新NVIDIA Broadcast1.2版本更新了新的AI增强效果房间回声消除和视频降噪等功能,并更新了音频降噪功能,以消除猫、狗和昆虫的声音。这些全新功能,以及之前发布的虚拟背景和自动追踪,现在可以同时生效,为音频和视频提供更高品质和更多特效。具体是如何展现的我们接下来就来看看。
实际体验:新版更为实用功能直击痛点
本次笔者采用了一款搭载了RTX 3080笔记本电脑GPU的游戏本,来对NVIDIA Broadcast 进行测试。
首先是麦克风和扬声器部分,这两个部分其实大同小异,主要都是噪音消除类型的功能。1.2中新增了“房间回声消除”功能,能够消除声音在房间的回声,以提升会议语音时的质量。
另外相比之前的版本,这里的效果部分可以多添加一个效果且同时生效。这两个部分的噪音消除,不只是可以消除麦克风输入中的背景噪音,甚至是处理传入的声音,比如游戏队友的键盘声,只要将其设为自动降噪,就能进一步的提升沟通的质量,这无论是在开视频会议或者是直播打游戏中都非常的实用。
接下来就是本次体验的重点,相比声音处理的功能,摄像头的功能更多。在最新的版本中,点击“相机”之后,左侧有相机源与各种效果的选项,和麦克风,扬声器的部分一样,现在可以同时生效两种效果,但是有所限制——一般是自动聚焦+任意其他的效果。
在相机源的右边的小图标点开,则可以细节的调整各种参数,比如亮度对比度等参数可以自行调整,当然对于不是很懂朋友要么就全部默认值要么就全自动是最方便的。
接下来就是效果,这里一共有四种效果可供选择——背景模糊,背景更换,背景删除和自动聚焦。
这张是没有任何效果的原图,环境可以看到非常杂乱
背景模糊,和拍照的人像模式有着异曲同工的效果,借助AI识别将杂乱无章的背景进行模糊处理,并把主体抠出来。可以看到在开启之后,虽然强度并没有拉到满,但背景的虚化效果还是非常明显的。
背景更换,这里的背景不仅能更换成图片,还能更换为视频,识别当前画面人像进行更换。
而背景删除,则犹如一键开启“屏蔽”,直接让背景“消失”只留下人像。
注意,这两种效果是在不采用任何绿幕或者蓝幕的任何道具下所完成的。
最后的自动聚焦,这里我们将自动聚焦和背景模糊一起使用,自动聚焦放大用户的图像并使用 AI 跟踪用户的头部运动,从而使其保持处于中心位置,即使左右移动也无妨。而这个效果配合背景更换和背景删除也同样实用。两种效果的组合搭配使用对于主播来说更为实用一些,比如在直播打游戏的时候同时生效这两种效果,能够有效的避免在直播时用户出画而影响直播质量,且隐藏或者模糊化背景,让直播更具沉浸感。
总结:RTX 30系列笔记电脑与NVIDIA Broadcast更搭
借助NVIDIA Broadcast强大的功能,能够有效的提升直播和线上会议的质量,这其中的功能都是需要借助AI计算,也就是说需要再搭载有RTX GPU的笔记本或者台式机才能体验到。
全新的RTX 30系列笔记本电脑GPU在年初早已发布,基于NVIDIA Ampere架构,搭载第二代RT Core 和第三代Tensor Core,并引入第三代Max-Q技术,实现轻薄化的设计。不仅能成为主播能随时开播的利器,更能成为远程办公人士的得力助手。
除此之外对于主播来说,RTX30系列笔记本GPU还搭载了新一代的NVENC高性能视频编码器,能够完成H.264和H.265两种格式的编码,目前主流直播串流软件已经提供了对其的支持。借助它可以极大的降低编码时处理器的占用,释放更多处理器性能供游戏本身使用,从而带来更好的游戏直播体验。
当下有数百万人利用客厅或厨房等空间当做家庭办公室使用,而他们所面临房间回声,噪音或视频噪点,背景杂乱等等问题影响他们的直播与线上会议质量。借助新一代的RTX 30系列笔记本电脑,不仅性能强劲,且设计更为轻量化,在第三代Tensor Core加持下,能够更好的支持NVIDIA Broadcast这种以AI驱动的应用,主播和远程办公人员也能更为得心应手,应用中的实用功能也将为直播以及线上会议等场景带来更好的体验。