8月23日消息,全球最大规模游戏展会科隆游戏展开展前夕,英伟达再次推出多个AI技术,以改进游戏画面和制作流程,其中包括将于今年秋季推出基于AI增强光线重建技术的DLSS 3.5。通过英伟达超级计算机训练的AI,可为密集型光线追踪游戏和应用创建更高质量的光线追踪图像,进一步提升游戏在光线追踪下的表现。
在游戏图形技术历史上,英伟达一直借助AI改善游戏图形效果,如最早推出了DLSS(深度学习超级采样)技术。DLSS原理是用计算机渲染低分辨率图像,再通过训练好的AI模型和专用运算单元(Tensor Core)还原成高分辨率的图像,以实现在游戏画面维持高质量的前提下,尽可能地节省算力。借助DLSS技术,可实现仅渲染1080P分辨率的画面下,输出4K分辨率的画面结果。
英伟达称,传统的“降噪”手段需要人工调整和处理,还存在游戏画面出现鬼影、损失画面效果等风险。
此次发布的DLSS 3.5将重点改进光线追踪下的画面表现,以实现更准确的照明。英伟达称,由于光线追踪场景下对光线计算的要求过高,折中的办法是使用光线采样,即向场景中发射少量光线作为场景照明、反射率和阴影的取样,最终输出带有嘈声的斑点图像,即噪点,因此还需要额外的“降噪”步骤,最终输出光线追踪图像。
英伟达称此方法并不完美,“降噪”需针对场景中存在的各种类型的光线追踪照明进行人工调整和处理,增加了开发过程的复杂度和成本,还降低了重度光线追踪游戏中的帧率。从结果上来看,还存在游戏画面出现鬼影、损失画面效果等风险。
对此,英伟达的DLSS 3.5尝试解决该问题。新引入的光线重建技术通过将需要人工设计的降噪器替换为超级计算机训练的AI网络(在采样光线之间生成更高质量的像素),然后在本地进行推理,为所有RTX显卡提升光线追踪图像质量。
据英伟达介绍,DLSS 3.5训练的数据量是DLSS 3的5倍,可以适应更多的光照模式,其最终效果比需要人工设计的降噪器更出色。
以《赛博朋克2077》为例,游戏中的城市充满了旋转广告牌和霓虹灯的反射,开启DLSS 3.5后,整个城市的画面质量和清晰度得到了大幅提升。
英伟达称,DLSS 3.5结合了超分辨率、帧生成和光线重建,与原生4K分辨率关闭DLSS渲染相比,可将《赛博朋克 2077》帧率提高5倍。
据悉DLSS 3.5将向所有RTX系列显卡开放。值得注意的是,DLSS 3.5将不仅应用于游戏,未来还会应用于工业设计等用途,包括《心灵杀手2》《赛博朋克 2077》《传送门RTX版》三款游戏,以及Chaos Vantage、D5渲染器和英伟达Omniverse三款用于3D内容创作的软件,也将引入DLSS 3.5技术。
英伟达还宣布针对此前的NVIDIA ACE(Avatar Cloud Engine)游戏开发版提供更新, 引入SteerLM技术,该技术使开发者能够定制NPC角色个性,让玩家与NPC的互动更真实。
NVIDIA ACE是英伟达在今年台北电脑展上推出的一项新技术,该技术通过生成式AI打造智能NPC角色。
英伟达称,目前大多数基于大语言模型的聊天机器人虽然能够准确回答问题,但没有个性或情感,通过SteerLM技术,NPC可以为游戏对话等互动提供准确的情绪反馈,如幽默、恶毒等。此外,与NPC的对话还会更符合对话者身份,开发人员可以创建NPC的派系属性,使回复内容与游戏中的故事情节相吻合,从而使角色能够感受到游戏世界的动态影响。
英伟达方面还表示,SteerLM技术有助于将“礼貌”的聊天机器人转变为情感角色,使开发者能够创造出更身临其境、更逼真的游戏。
基于英伟达ACE游戏开发版,已经有多家游戏开发公司进行了早期尝试。英伟达官网显示,包括欧洲游戏公司GSC Game World的游戏《潜行者:切尔诺贝利之心》、独立开发商Fall Leaf 的《Fort Solis》,虚拟社交公司Charisma.ai等都在利用其动画生成能力。