生成式 AI 是最前沿的科技发展方向之一,正在举行的消费电子大展 CES 2024 上,我们正在见证新变革的发生。
昨天凌晨,英伟达在一场半小时的特别演讲中介绍了一系列 AI 加持的新技术,通过整个技术堆栈创新加速生成式 AI 在 AI PC 端落地。演讲结束后,NVIDIA 股价应声上涨超过 6%,领跑科技美股。今天更是持续上涨,市值突破 1.31 万亿美元。
这一次,英伟达通过领先业界的理解,结合十几年的 AI 生态精心布局,真正实现了 AI PC 的落地,其发布的一系列产品也已具备了相当的实用性和前瞻性。
NVIDIA ACE 驱动生成式 AI 变革游戏体验
去年,整个科技界经历了生成式 AI 的爆发。随着技术快速发展,应用落地也在加速进行中,AI PC 是很多厂商最近关注的重点。作为 AI 产业领导者的英伟达也早有准备。
在 CES 上,英伟达展示了大量生成式 AI 的服务能力。
其中,最吸引眼球的当属 NVIDIA ACE(NVIDIA Avatar Cloud Engine)微服务生成式 AI 改变游戏体验。
用给大语言模型设定角色扮演的方式调教好 NPC,在游戏场景中你就能看见 NPC 之间基于各自角色的自然交流了,每次内容都是不一样的:
如果三次元的玩家加入进对话之中,直接在屏幕前与 NPC 展开一段闲聊,它们也能应答如流,看起来很自然:
以上展示驱动游戏中交互式虚拟数字人物的幕后英雄正是 NVIDIA ACE,在去年 5 月首次被提出,其利用 AI 驱动的自然语言交互技术,可以为游戏中的非玩家角色(NPC)带来智能。
在 CES 2024 特别演讲中,英伟达 ACE 高级产品经理 Seth Schneider 简单介绍了 ACE 的技术。据介绍,目前呈现出的演示已经可以解释玩家的语音,并将其转换为文本。随后,经过转录文本会被输入到云端的大语言模型上以生成 NPC 的响应。响应文本被输入 Omniverse Audio2Face 对生成的语音进行口型同步,然后在游戏中进行渲染。
通过英伟达本次开放的 Production Microservices,开发者们可以更加轻松地给 NPC 加智商,让玩家在游戏里和 AI 游戏 AI 每次互动的效果都不一样。
据介绍,开发者可以通过 ACE 微服务、NVIDIA Audio2Face(A2F)等 AI 模型,以及 NVIDIA Riva 自动语音识别(ASR)技术构建起交互式的虚拟数字化身,前者能利用声音制作出表情丰富的面部动画,后者可开发定制的多语言语音和翻译应用,以供虚拟数字人直接使用。
已经开始采用 ACE 的开发商里面不乏我们熟悉的面孔:米哈游、网易、掌趣、腾讯、育碧,还有一系列面向元宇宙和数字形象的公司,如 Convai、Charisma.AI、Inworld 和 UneeQ 等。
目前尚不清楚生成式 AI 驱动的 NPC 将首先入驻哪些游戏,但英伟达和 Convai 声称该技术将与 Unreal Engine 和 Unity 等流行的游戏引擎「无缝」集成,看来距离实际应用应该已经不远了。
生成式 AI 的超强核心:三款 GPU 连发
基于隐私、成本和延迟考虑,本地运行生成式 AI 模型是至关重要的。
为了带动生成式 AI 等新类型应用,英伟达本届 CES 也准备好了新的 GPU。
本次,英伟达发布了三款 GeForce RTX 40 SUPER 系列 GPU,包括 GeForce RTX 4080 SUPER、GeForce RTX 4070 Ti SUPER 和 GeForce RTX 4070 SUPER,它们将作为 AI PC 的核心,为最新游戏提供超强动力。
未来的 3A 游戏大作需要越来越多的 AI 驱动的技术,如超分辨率(Super Resolution)、帧生成(Frame Generation),光线重建(Ray Reconstruction)来与光线追踪技术相结合的能力。因此,AI 加速就显得尤为重要。
在这其中,RTX 4070 SUPER 提供了 36 SHADER TFLOPS、82 RT TFLOPS 和 568 AI TOPS 的 AI 算力,核心数量比 RTX 4070 多 20%,使其仅使用 3090 的一小部分功耗就实现了超越 3090 的性能。借助 DLSS 3,RTX 4070 SUPER 的性能领先优势将扩大到 1.5 倍。RTX 4070 SUPER 将于 1 月 17 日开售,建议零售价为人民币 4899 元起。
性能更为强大的 RTX 4080 SUPER 提供 52 SHADER TFLOPS、121 RT TFLOPS 和 836 AI TOPS,支持 4K 全景光线追踪游戏。
RTX 4080 SUPER 的性能比不支持 DLSS 帧生成技术的 RTX 3080 Ti 快 1.4 倍,在传统光栅化游戏中也能提供惊人性能。凭借 836 AI TOPS,DLSS 帧生成 (Frame Generation) 带来额外性能提升,RTX 4080 SUPER 性能是 RTX 3080 Ti 的 2 倍。RTX 4080 SUPER 拥有更多的核心和更快的显存,性能更胜一筹。RTX 4080 SUPER 将于 1 月 31 日开售,建议零售价为人民币 8099 元起。
RTX 4070 Ti SUPER 提供 44 SHADER TFLOPS、102 RT TFLOPS 和 706 AI TOPS,可在 1440p 乃至 4K 分辨率的超高帧率下最大限度地发挥游戏性能。与 RTX 4070 Ti 相比,它拥有更多核心,显存容量增至 16GB,显存位宽为 256 bit,显存带宽大幅提升至 672 GB/s。比 RTX 3070 Ti 快 1.6 倍,开启 DLSS 3 后比 RTX 3070 Ti 快 2.5 倍。RTX 4070 Ti SUPER 将于 1 月 24 日开售,建议零售价为人民币 6499 元起。
RTX 40 系列的 SUPER 版 GPU 均会在本月上市,相比在售的「标准版」加量不加价,提供了更好的性能。看到目前的规格,4070Ti SUPER 应该是其中性价比最高的一款了。
助推下一代游戏画面
接下来,我们看下 RTX 显卡助推游戏画面的变革。
应用 RTX 显卡的 AI 能力,即将上市的 3A 游戏大作《地平线:西之绝境》展现出了各种前所未有的画面效果:
除了 DLSS 3 之外,游戏还将支持 DLAA 和 NVIDIA Reflex。利用 AI 加持的技术,游戏的帧率与画质都将有明显的提升。英伟达表示,各类 RTX 技术还将被应用在暗黑 4、Pax Dei 等游戏上。
利用光线追踪和生成式 AI 工具,英伟达还在帮助老游戏快速升级到 4K 版,一部《半条命 2 RTX》让老玩家们回忆起了当年。在 RTX Remix 版游戏中,平均世界材质的像素是原始游戏的 8 倍,服装等内容材质的几何细节更是原始游戏的 20 倍:
这就是 RTX 的 AI 超能力所创造的宇宙。
AI PC,未来还有更多可能性
生成式 AI 时代,越来越多的行业正在经历人工智能技术的革命。
面对各个行业要把「应用重做一遍」的新机遇,不论科技公司还是硬件厂商都在思考新的游戏规则将会是什么。从对元宇宙的推崇,到自动驾驶、工业机器人技术的探索,再到对基础科学领域的持续支持上,我们都能看到英伟达引领 AI 时代的身影。
而对于大多数普通用户来说,由 RTX 加速的生成式 AI,将会为 AI PC 体验提供强大动力。这也许会是我们可以最先体验到新技术的方式。
正如英伟达 CEO 黄仁勋所说,生成式 AI 是计算史上最重要的平台转变,它将改变包括游戏在内的所有行业。在消费级电子上,未来似乎已经到来了。
本文来自微信公众号“机器之心”(ID:almosthuman2014),作者:泽南、小舟