在2026年游戏开发者大会(GDC 2026)上,高通技术公司正式推出了骁龙游戏AI 开发工具包 (Snapdragon Game AI SDK)——这是一款全新开发工具包,助力游戏开发者能够将先进的设备端AI功能引入到手机游戏和个人电脑游戏中。

本文将深入探讨骁龙平台上的设备端AI如何启用智能非玩家角色(NPC)、自适应AI队友、个性化 AI 陪伴和实时AI教练,从而实现游戏体验的变革 ——所有这些功能均在设备端实时运行,以确保低延迟、AI驱动的游戏体验。

游戏体验的未来在于设备端运行

本地AI推理正在推动游戏领域的下一次革命。通过在玩家设备端直接执行复杂的AI计算(利用骁龙平台内置的AI引擎/NPU),各种游戏均能够提供更加智能、更具沉浸性的体验,兼具实时响应能力和强大的隐私保护。

与基于云端的AI解决方案(可能存在延迟并导致数据隐私问题)不同,设备端AI意味着游戏世界能对玩家操作做出即时反应,甚至无需联网即可完整运行所有功能,且不牺牲任何性能。对于依赖于动态交互的游戏类型而言,这堪称颠覆性的变革。

设备端游戏AI应用软件栈

想象一下,您能与NPC自然交谈,或看着您的游戏伙伴如何适应您的玩游戏风格,同时没有任何延迟,也不需要连接互联网。

设备端AI为游戏带来的核心优势包括:

  • 超低延迟‌:AI在设备端进行处理(通过骁龙NPU),因此由AI驱动的游戏角色和功能可以在几毫秒的时间做出响应。这样可以确保快节奏游戏的流畅性与操作响应。
  • 随时可用‌:即使在没有连接互联网的情况下,仍然可以使用AI驱动的游戏功能。无论您是在飞机上还是处于离线状态,语音控制指令、智能NPC、以及其他AI功能都能在任何时间、任何地点继续正常运行。
  • 高能效表现‌:我们针对能效比(每瓦性能)对骁龙平台的异构计算架构(多核CPU、高通Adreno GPU、以及高通Hexagon AI 处理器(NPU))进行了优化。骁龙游戏AI开发工具包充分利用这种高效能运行各种深度学习模型和高级功能,同时没有显著消耗设备电量或导致游戏帧率下降。
  • 数据隐私‌:所有AI处理过程均在玩家设备端本地进行,从而确保语音数据、摄像头画面、以及个人游戏玩法信息的隐私性,并将其保留在设备端。无需将敏感的玩家数据传出设备,从而默认保护了用户隐私。

借助设备端AI,开发者能够为游戏带来全新的响应速度与智能水平。通过调用骁龙硬件的AI加速能力,游戏可以实现更高的沉浸性和互动性 – 将骁龙平台的计算能力与各种前沿AI模型结合在一起,同时为玩家确保流畅、安全的游戏体验。

骁龙游戏AI 开发工具包介绍

骁龙游戏AI SDK架构图

骁龙游戏AI 开发工具包是高通技术公司推出的第一款专用AI游戏开发工具包,旨在确保游戏开发者能够轻松完成设备端AI集成。

该开发工具包适用于由骁龙处理器驱动的所有平台 – 包括Android智能手机、骁龙 AI PC,以及即将获得支持的扩展现实设备 – 从而确保开发者能够在数以百万计的设备上实现“一次编写,随处运行”。

该开发工具包可适用于各种流行游戏引擎和函数库提供的便捷插件,封装机器学习和硬件加速的复杂性,从而确保开发者能够专注于游戏玩法和设计。

技术能力:骁龙游戏AI 开发工具包提供了一整套针对实时游戏场景进行优化的设备端AI功能。这些功能目前可以通过虚幻引擎5(Unreal Engine 5)插件启用。

核心功能包括:

  • 设备端自动语音识别(ASR):将语音实时转换为文本,这样玩家就可以利用声音控制游戏玩法或与AI角色自然聊天。该开发工具包的“语音转文本”引擎利用骁龙AI加速功能完全在设备端运行,从而在确保最小延迟的前提下处理语音命令和对话。
  • 利用设备端大语言模型进行自然语言处理:直接在搭载骁龙处理器的设备上运行各种高级大语言模型(LLM)。该开发工具包支持通过量化等技术优化的最先进语言模型(拥有数十亿个参数),以便在骁龙NPU上运行。这样可以确保游戏中的AI对话和叙事系统能够理解上下文,记住过去的互动内容,并在不需要云端网络连接的情况下生成动态响应。
  • 逼真的文本转语音(TTS:快速生成逼真的语音。该开发工具包的设备端文本转语音组件能够为NPC或AI助手演绎出具有自然语调和情感的对话。这样可确保游戏能够为每个AI角色赋予独特的声音,并具备即时说出任意台词的能力 – 无需预先录制画外音。

在幕后,骁龙游戏AI 开发工具包以智能方式对这些工作负载进行协调,以最大限度地提高性能。

该开发工具包自动利用骁龙平台异构处理器 – 在高通Kryo CPU内核,高通Adreno GPU、和高效Hexagon AI处理器(NPU)之间分配各项任务 – 以并行运行多项AI任务,同时不会破坏游戏的图形渲染或物理效果。

即使是传统上较为繁重的AI计算任务(例如:运行大模型或实时视觉推理),如今也能在设备端以高帧率运行,而无需依赖远程服务器。

简而言之,骁龙游戏AI 开发工具包释放了骁龙硬件在游戏AI方面的全部潜力,实现了以前在移动设备和边缘设备上无法实现的实时游戏AI体验。

看看我们在2026年游戏开发者大会上的演示视频,了解一下骁龙游戏AI 开发工具包的实际表现,同时展示AI驱动的角色和真实的游戏示例:

设备端AINPC演示

2026年3月7日 | 1:03时

骁龙游戏设备端AI NPC演示

点击播放

AI NPC、队友、伙伴、和教练全新的游戏体验

开发者利用这些设备端AI功能可以创造出哪些新的游戏功能?这些可能性令人感到兴奋,但骁龙游戏AI 开发工具包有四种关键用例:

  • AI NPC游戏世界现在可以填充更加智能的由AI驱动的NPC,它们能与玩家进行无脚本的对话和动态互动。借助设备端语音与语言AI,NPC可以实时聆听玩家的声音(通过设备端自动语音识别),利用本地语言模型理解意图,并利用自然语音(文本转语音)技术做出回应 – 所有这一切均可实时完成。

由于在设备端运行,NPC可以即时做出回应,甚至在玩家离线时也能照常运行。想象一下,一个可以回答关于游戏世界任何问题的任务发布NPC,或者一个可以记得您曾出售商品内容的虚拟店主。有了骁龙游戏AI 开发工具包,开发者可以创造出更有活力、反应更灵敏的NPC,并且无需为每一行对话编写脚本。

  • AI队友:游戏可以提供AI驱动的同队队友或合作伙伴,就像人类队友一样与玩家合作。设备端的AI队友可以理解您的语音命令(例如:“在我重新装填时掩护我!”)并根据语音命令立即采取行动,这要归功于设备端的自动语音识别和决策AI。

随着时间的推移,这些AI队友可以适应您的游戏风格,学习您的策略,并根据您的玩游戏方式提供专门支持。其结果是一种更有吸引力的合作体验 – 您实际上是在与一个实时交流和制定战略的AI一起玩游戏,同时没有任何网络延迟。

  • AI伙伴:伙伴在游戏中充当个人助手或同伴。在设备端AI驱动的前提下,伙伴可以在整个游戏过程中提供有用的提示、故事背景讲解,甚至只是友好的互动。

例如,一个伙伴角色可能会对您的成就发表评论,当您卡关时提供提示,或者根据您的行为调整其个性。由于其背后的AI在设备端运行(可以访问大模型功能和内存),该伙伴角色能够与您进行长时间对话,并记住您早期冒险游戏的具体情况。这种个人风格可以让游戏体验具有更高沉浸性并富有情感吸引力。

  • AI教练:教练会观察您的游戏玩法,并提供实时指导,以帮助您提高自身技能。利用设备端的视觉和遥测数据,教练AI可以分析正在发生的情况 – 无论是您在驾驶游戏中的赛车路线,还是您在战略比赛中的战术 – 并为您提供即时反馈或建议。

例如,在第一人称射击游戏对战中,如果AI教练检测到敌人从后方接近,可能会立即提醒您:“注意侧翼!”,或在回合间隙建议您调整战术策略。由于分析过程在您的设备端本地完成,因此可以在最低限度延迟的情况下提供教练的提示,从而能够在最关键时刻及时送达。

这些用例仅仅是可能性的开始。利用骁龙游戏AI 开发工具包,开发者可以自由尝试直接在玩家设备上运行的AI驱动游戏功能。

归根结底:您可以为游戏赋予听、说、适应和协助的能力来显著提高沉浸感和玩家参与度,这些在没有云基础设施的情况下无法实现这些能力。我们很高兴看到开发者社区使用设备端游戏AI所带来的创意。

您是否准备好构建游戏AI的未来?

骁龙游戏AI开发工具包现已上市,它为游戏开发者开辟了一个新的前沿探索领域。无论您是在构建移动增强现实冒险游戏,还是在搭载骁龙PC 平台开发3A级游戏,该开发工具包都助力您在设备端利用AI构建突破性体验。

如能充分利用骁龙NPU和经过优化的设备端模型,您可以提供角色真正理解和响应玩家的游戏玩法,以及游戏本身进行学习和适应的游戏玩法。

设备端AI驱动游戏的时代已经到来,高通技术公司诚邀您成为首批开拓新一代游戏AI的先驱者。

后续步骤

在所发布内容中表达的观点仅为原作者的个人观点,并不代表高通技术公司或其子公司(以下简称为“高通技术公司”)的观点。所提供的内容仅供参考之用,而并不意味着高通技术公司或任何其他方的赞同或表述。本网站同样可以提供非高通技术公司网站和资源的链接或参考。高通技术公司对于可能通过本网站引用、访问、或链接的任何非高通技术公司网站或第三方资源并没有做出任何类型的任何声明、保证、或其他承诺。

骁龙与高通品牌产品均为高通技术公司和/或其子公司的产品。

关于作者

安迪·米歇尔博士,高通技术公司高级产品经理

阅读更多

Logo

AtomGit 是由开放原子开源基金会联合 CSDN 等生态伙伴共同推出的新一代开源与人工智能协作平台。平台坚持“开放、中立、公益”的理念,把代码托管、模型共享、数据集托管、智能体开发体验和算力服务整合在一起,为开发者提供从开发、训练到部署的一站式体验。

更多推荐