时间:2024-08-12 22:40:01来源:界面新闻
在第二十一届中国国际数码互动娱乐展览(ChinaJoy)期间,高通与腾讯、网易和OPPO等游戏开发商及OEM厂商举行了一场移动游戏技术展示活动,讨论移动游戏行业的技术发展趋势,以及生成式AI技术的相关落地实践。
高通技术公司手机、计算和XR事业群总经理Alex Katouzian给出的数据显示,2023年全球玩家在移动游戏上的花费接近900亿美元,约占全球游戏市场总销售收入的50%,中国市场的销售收入约占全球的三分之一。
随着全球游戏厂商对移动平台的重视程度增加,融易新媒体消息,移动游戏的质量也逐渐向PC和主机游戏靠拢,这对智能手机的终端算力和性能提出了更高的要求。
最近几年,高通保持着每年发布一款新移动平台的传统,目前主流的第三代骁龙8平台(骁龙8 Gen3)发布于2023年末,目前已有超过115款安卓旗舰手机采用该平台。
Alex Katouzian在展示会现场透露称,高通Oryon CPU也即将登陆移动平台,高通也将在十月份的骁龙峰会上公布更多技术细节。
终端侧生成式AI将成主流选择
骁龙8 Gen3是高通针对生成式AI研发的首个移动平台,其NPU和异构计算架构支持虚拟助手、实时翻译等终端侧AI游戏功能,并且给了游戏公司开发AI NPC的硬件性能支持。
高通与网易已经将这项技术在游戏中应用落地。网易在7月25日刚刚上线的《永劫无间》手游中,发布了全球首例语音AI队友功能。
该游戏基于骁龙8 Gen3的NPU直接在端侧运行AI推理模型,玩家能通过语音交互的方式与AI进行交流。
在网易的实机演示中,这个AI队友能听懂玩家的指挥,执行搜装和送装操作,还能实时观察战况,向玩家汇报关键信息。此外AI队友还懂得与真人玩家进行博弈与配合。
网易伏羲实验室AI技术负责人吕唐杰介绍称,这项功能的实现,融合了包括语音识别、语义理解、文本生成、语音合成、强化学习和模仿学习在内的多项AI技术。
“为了达到极低的交互速度,实现类似于GPT-4o的交互体验,我们做了大量的工程优化工作”,吕唐杰表示,目前游戏内AI队友的最长相应时间已经遭控制在1秒以内。
网易为什么要在《永劫无间》手游中进行端测推理的问题,他给出了两个理由:
首先,端侧推理能解决传统云端推理带来的高时延问题,对于网络条件不好的玩家来说,能明显改善游戏流畅度的体验。
其次,将AI推理从云端转移到端侧,能充分利用手机终端的算力,降低服务运行成本,游戏开发者就不用通过限制AI玩法的方式降低成本,也不会影响到用户的全面体验。
他透露称,未来网易游戏还计划将更多AI能力,包括大语言模型(LLM)、语音合成(TTS)等技术适配到手机终端中。
移动端画质和功耗优化是核心
高通在展示会上重点介绍了其Snapdragon Elite Gaming技术,该技术目前包含超过60项游戏特性。
其中,Adreno图像运动引擎2.0(AFME2.0)是高通自研的基于游戏3D信息的插帧技术,它运行在GPU上,同时支持内插帧和外插帧两种模式。
AFME2.0从游戏管线中获取运动向量、颜色信息和深度信息等,经过算法运算生成更高质量的新游戏帧,用较低功耗实现游戏帧率翻倍的效果。
高通研发出该项技术后,将其推广给外部游戏公司,引起了很多游戏工作室的兴趣。