拍摄:崔鹏

移动游戏技术迭代加速,端侧AI和高帧优化渐成趋势

界面新闻记者 | 崔鹏

界面新闻编辑 | 文姝琪

在第二十一届中国国际数码互动娱乐展览(ChinaJoy)期间,高通与腾讯、网易和OPPO等游戏开发商及OEM厂商举行了一场移动游戏技术展示活动,讨论移动游戏行业的技术发展趋势,以及生成式AI技术的相关落地实践。

高通技术公司手机、计算和XR事业群总经理Alex Katouzian给出的数据显示,2023年全球玩家在移动游戏上的花费接近900亿美元,约占全球游戏市场总销售收入的50%,中国市场的销售收入约占全球的三分之一。

随着全球游戏厂商对移动平台的重视程度增加,移动游戏的质量也逐渐向PC和主机游戏靠拢,这对智能手机的终端算力和性能提出了更高的要求。

最近几年,高通保持着每年发布一款新移动平台的传统,目前主流的第三代骁龙8平台(骁龙8 Gen3)发布于2023年末,目前已有超过115款安卓旗舰手机采用该平台。

Alex Katouzian在展示会现场透露称,高通Oryon CPU也即将登陆移动平台,高通也将在十月份的骁龙峰会上公布更多技术细节。

终端侧生成式AI将成主流选择

骁龙8 Gen3是高通针对生成式AI研发的首个移动平台,其NPU和异构计算架构支持虚拟助手、实时翻译等终端侧AI游戏功能,并且给了游戏公司开发AI NPC的硬件性能支持。

高通与网易已经将这项技术在游戏中应用落地。网易在7月25日刚刚上线的《永劫无间》手游中,发布了全球首例语音AI队友功能。

该游戏基于骁龙8 Gen3的NPU直接在端侧运行AI推理模型,玩家能通过语音交互的方式与AI进行交流。

在网易的实机演示中,这个AI队友能听懂玩家的指挥,执行搜装和送装操作,还能实时观察战况,向玩家汇报关键信息。此外AI队友还懂得与真人玩家进行博弈与配合。

网易伏羲实验室AI技术负责人吕唐杰介绍称,这项功能的实现,融合了包括语音识别、语义理解、文本生成、语音合成、强化学习和模仿学习在内的多项AI技术。

“为了达到极低的交互速度,实现类似于GPT-4o的交互体验,我们做了大量的工程优化工作”,吕唐杰表示,目前游戏内AI队友的最长相应时间已经被控制在1秒以内。

网易为什么要在《永劫无间》手游中进行端测推理的问题,他给出了两个理由:

首先,端侧推理能解决传统云端推理带来的高时延问题,对于 *** 条件不好的玩家来说,能明显改善游戏流畅度的体验。

其次,将AI推理从云端转移到端侧,能充分利用手机终端的算力,降低服务运行成本,游戏开发者就不用通过限制AI玩法的方式降低成本,也不会影响到用户的完整体验。

他透露称,未来网易游戏还计划将更多AI能力,包括大语言模型(LLM)、语音合成(TTS)等技术适配到手机终端中。

移动端画质和功耗优化是核心

高通在展示会上重点介绍了其Snapdragon Elite Gaming技术,该技术目前包含超过60项游戏特性。

其中,Adreno图像运动引擎2.0(AFME2.0)是高通自研的基于游戏3D信息的插帧技术,它运行在GPU上,同时支持内插帧和外插帧两种模式。

AFME2.0从游戏管线中获取运动向量、颜色信息和深度信息等,经过算法运算生成更高质量的新游戏帧,用较低功耗实现游戏帧率翻倍的效果。

高通研发出该项技术后,将其推广给外部游戏公司,引起了很多游戏工作室的兴趣。

腾讯与高通在刚刚发布的《塔瑞斯世界》项目上就进行了重点合作,这款产品是基于UE4(虚幻引擎4)研发的大世界MMORPG游戏,对游戏流畅性和操控响应时间有非常高的要求。

此前,产品在原生60帧画面下由于性能负载较大、功耗较高,导致游戏经常出现帧率波动,手机在运行一段时间后便开始降频,非常影响用户体验。

而AFME2.0是纯GPU运算,不会调用CPU资源,所以帧数表现更加稳定,在60帧下的CPU负载与30帧几乎一致。

腾讯游戏国内发行线生态发展部引擎组负责人胡豪翔给出的数据显示,AFME2.0在能耗上相较原生60帧方案降低大约30%,画面更加流畅的同时,画质没有任何损失。

高通产品市场资深经理姚轶非表示,提升游戏画质是手 *** 业的技术趋势之一,Snapdragon Elite Gaming技术已经对移动行业产生巨大影响,“因此越来越多的3A端游大作正在迁移到移动端。”

终端厂商也在跟进。本月初,一加Ace 3 Pro手机发布时曾宣布,其在安卓平台首个实现了《原神》原生级120帧支持。

OPPO游戏中心负责人谭皓介绍称,在这个过程中,一加获得了不少自研技术突破。

比如,将帧生成与计算的整个过程放在高通芯片上完成,让生成帧与游戏渲染帧之间,只间隔一个120Hz的垂直同步周期,“这已经是安卓显示体系的极限。”

此外一加还开发了基于GPU的算法,将帧生成的能力转移到GPU上进行运算,解决出帧延迟的问题。

谭皓表示,在整个研发过程中,一加、高通与米哈游三方技术团队花费10个月时间讨论技术方案,然后又花费6个月时间进行调试,才最终实现这套高帧优化方案。

OPPO相关技术人员在现场告诉界面新闻,OPPO已经将此前的部分优化技术方案分享给平台方和外部开发者,并且正在关注基于UE(虚幻引擎)的移动游戏的高帧优化工作,在这方面引擎差异不会是难点。