乍一看,NVIDIA在本届CES 2024大展期间似乎只是纸面发布了RTX 40 SUPER系列桌面显卡,并没有太多动作,但其实不然。
特别是在最擅长、最让人信服的AI领域,NVIDIA拿出了多项技术创新,涉及到游戏、图像、视频、直播等多个应用场景,再次彰显了自己的领导地位。
快科技有幸参观了NVIDIA展示的一系列DEMO,接下来和大家分享。
【ACE技术与游戏AI NPC】
ACE也就是Avatar Cloud Engine(虚拟形象云引擎),可以利用最先进的生成式AI模型,在到游戏、应用中生成可以自然交互的虚拟数字人物。
同时有Audio2Face(A2F)等AI模型可以生成丰富、自然的面部表情,Riva自动语音识别(ASR)可以用于多语言语音翻译。
有了这一系列新技术,游戏NPC不再是以往的固定套路,而是能够和玩家自然交互,玩家可以问他任意问题,比如最近情况怎么样呀,给我下碗面呀,之类的。
对于不同玩家的哪怕同一问题,AI NPC也会给出不同的反应,结果就是每一场对话、每一次互动,都是独一无二的。
AI NPC还具备场景物体感知能力,你可以问他某个物品的作用,它们还可以捡起物品并送到指定区域。
此外,AI NPC还能带领玩家穿越游戏世界,到达目标位置。
现已采用ACE技术的开发商有Convai、Charisma.AI,、Inworld、米哈游、网易游戏、掌趣科技、腾讯游戏、育碧、UneeQ。
【Chat With RT】
这个DEMO可以将用户的文档、笔记、视频或其他数据等资料与大语言模型连接,更加个性化。
利用检索增强生成(RAG)、TensorRT-LLM、RTX加速,用户可以与自定义聊天机器人对话,更快、更精准地获得所需答案。
另外,它是在本地运行的,因为更加安全,不会泄露隐私。
【AI生图与编辑】
Stable Diffusion诞生以来,AI生图大家都不陌生了,也开始出现各种各样的商业服务,iStock就是一个典型。
iStock基于NVIDIA硬件加速,可以根据输入关键字,在线快速生成你想要的图片或插画。
更贴心的是,你可以选择1:1、3:4、4:3、9:16、16:9等不同长宽比,免于二次裁切,还可以选择不同的色调或模式,比如温暖、冷库、艳丽、自然、黑白等等。
所有生成的图片,都可以自由使用,不会存在侵权。
当然,高级服务是需要付费的。
生图只是初级阶段,毕竟AI制作的图片不一定完全符合我们的需求,这就需要进一步的编辑功能。
AI Picasso就是一个兼具生图、修图的绘图软件,可以结合已有照片生成所需图片,可以自由编辑更换图片的局部(比如给人物换一件衣服),可以进行AI扩图等等。
还可以和DaVinci Resolve Studio 这样的高级专业软件结合起来,进行更多维度的编辑与创作。
【RTX Video HDR视频增强】
视频增强技术大家也不陌生了,如今在AI的辅助下玩法更多,效果也更好。
NVIDIA之前就推出过RTX VSR视频增强技术,而最新的RTX Video HDR可以将浏览器中播放的任何SDR视频转换为HDR视频,也就是通过AI扩大动态范围,使得动态光影效果更自然,更符合实际视觉效果。
直白地说,就是可以让该亮的地方足够亮,该暗的地方则足够暗,整体场景更有对比度。
【RTX AI PC和工作站】
AI PC的概念火起来了,GPU无疑是其中非常关键、最强有力的一环,NVIDIA RTX在这方面自然有着无法匹敌的优势,更是凭借强大的GPU,延伸到了AI工作站。
宏碁、华硕、戴尔、惠普、联想、微星等厂商都在发布全新的RTX AI笔记本,为用户带来开箱即用的生成式AI体验。
对比只能负责低强度推理负载的NPU AI引擎,RTX AI笔记本凭借更强的算力、更好的优化适配,性能提升幅度可以多达20-60倍。
配备RTX GPU的移动工作站则可以运行NVIDIA AI Enterprise软件,包括TensorRT、NVIDIA RAPIDS,用于简化、安全的生成式AI和数据科学开发。
联想Yoga Pro 9i,配备RTX 4070 Laptop GPU,支持超级分辨率、光线重建、帧生成的高级的DLSS 3.5功能,从而可以实时、流畅地进行3D渲染。
华硕ROG幻16,配备RTX 4080Laptop GPU,展示了RTX增强的AV1视频编码,导出速度可以直接翻倍。
三星Galaxy Book 4 Ultra,配备RTX 4070 Laptop GPU,展示基于RTX AI增强的物体移除,可以快速将照片中不想要的杂物彻底删除,并智能补完相应场景,不留任何痕迹。
戴尔XPS 16,配备RTX 4070 Laptop GPU,AI性能遥遥领先苹果。
最后看一个直播增强技术,目前用于海外直播平台Twitch,利用一台RTX PC,可以针对不同设备生成不同重量的直播流,提供最合适的码率、分辨率、帧率。
比如高清电视播放的时候展示4K60,高性能台式机1440p60,一般笔记本1080p60,平板机720p30,手机则是480p30,等等。
诚然,如今几乎每家科技公司都在谈论AI,尤其是提供AI软硬件基础的半导体行业,都在倾力投入AI。
在这其中,NVIDIA无疑是最闪亮的一颗星,无论是AI加速器硬件,还是CUDA生态软件,都是绝对的遥遥领先,如今又将生成式AI全面带入PC消费级市场,从各个维度颠覆着长久以来的体验。
对于NVIDIA,资本市场也是极为认可的,公司股价最近又迎来一波暴涨,连续多日创造新高,仅仅过去一周就涨了将近50美元,幅度接近10%,至截稿时已达547.10美元,对应市值高达1.35万亿美元!
另外,半导体调研机构Tech Insights最新公布的2023年全球半导体企业TOP25榜单上,NVIDIA以年收入近500亿美元(预估)高居第三位,比上年提升了五个名次。
25家企业总收入下跌了11%,前10名合计也跌了9%,但是NVIDIA自己猛增了多达102%,而其他家要么下跌,要么增幅只有个位数。
这些,无疑都是对NVIDIA AI实力的最佳印证。