六、视频超分辨率和Stable Diffusion:深度学习只需65秒就能生成一张图
——RTX视频超分辨率
在40系发布之后,NVIDIA带来了RTX Video Super Resolution 视频超分辨率技术,该技术通过AI人工智能、RTX Tensor张量核心硬件单元来实现,可提高浏览器内的视频包括直播内容分辨率显示效果。
笔者随意找了720P的视频,在相同画面下,不同设置下截图后,使用NVIDIA的ICAT画质对比工具放大局部。
右边是开启RTX视频超分辨率的表现,可以看到在未开启时,羽翼部分、腿部羽毛部分,画面噪点非常明显,线条也很不清晰。
在开启之后,在修复后的画面,细节也更多了,失真现象最大程度得到了改善。
——Stable Diffusion
时下最火的Stable Diffusion,它是深度学习文本到图像生成的模型,有了RTX 40系的加持,也让众多玩家进一步发挥出显卡的可玩性。
Stable Diffusion只需要输入一句话、或者特定的关键词,就能生成一幅你想要的图像。
不过它对配置要求较高,至少需要一张显存容量6GB以上的NVIDIA显卡。
在测试时,索泰RTX 4070天启OC的出图速度极快,65秒就能够生成一张图片,资源占用上,在渲染过程中占用了9GB显存,频率最高达到了2885MHz,功耗最高217W左右。
和RTX 3070 Ti、RTX 2070 Super对比,可以看到在相同条件下,索泰RTX 4070天启OC的出图速度要更快一些。
我们测试的是单图生成,如果大量出图,那么RTX 40系显卡的时间优势要更明显。
不过由于每次生成的图片并不相同,所需的时间也会产生一定的偏差,对比图仅做参考。