游戏中的计算机视觉：提升玩家体验

游戏行业中的生成式人工智能

一个主要趋势是使用生成式人工智能使游戏角色更智能、反应更灵敏。一个很好的例子是，在即将推出的网络游戏《MIR5》中，第一个由人工智能驱动的 Boss诞生了。

在游戏中，BOSS 战通常是指在游戏的关键时刻（通常是在关卡或故事情节的最后）与强大敌人进行的一场具有挑战性的战斗。这些战斗通常是对玩家技能的考验，旨在让玩家感觉紧张刺激、收获颇丰。

‍

传统上，BOSS 角色都是按照脚本模式，每次都使用同一套动作。但在《MIR5》中，这个新的人工智能老板实际上是在向与之战斗的玩家学习。它会观察玩家的行为方式、使用的武器、移动方式以及所依赖的策略，然后调整自己的攻击方式，以保持战斗的挑战性。 

因此，如果你再次回到游戏中与同一个 BOSS 对战，它可能不会以同样的方式行动两次。这种自适应行为让战斗更有真实感，迫使玩家独立思考，而不仅仅是记住模式。

VR 游戏中的计算机视觉

游戏领域的另一个人工智能趋势是虚拟现实（VR）的应用日益广泛。VR 是一种让玩家通过头戴式耳机和动作控制器进入一个完全数字化的 3D 世界的技术。它能让玩家产生身临其境的感觉，而不仅仅是在屏幕上观看游戏。 

人工智能与计算机视觉相结合，可用于在 VR 游戏中更准确地跟踪玩家的动作和反应。这包括使用摄像头和传感器捕捉真实世界中的动作，如头部转动、手势甚至面部表情，然后将这些数据转化为游戏中的动作。这有助于在 VR 中创造更流畅、更逼真的体验，让您的手势和动作感觉与游戏世界真正相连。

利用计算机视觉的混合现实赛车

风火轮：风火轮：漂移拉力赛》是一款将实体遥控（RC）汽车与虚拟游戏相结合的赛车游戏。玩家可以驾驶遥控车在自己的生活空间里兜风，而屏幕上显示的是数字版的遥控车在表演漂移、跳跃和助推等特技。虽然真实的汽车仍停留在地面上，但游戏通过在实时视频馈送上叠加视觉效果，营造出高速运动的假象。

这种设置依靠混合现实技术（它融合了现实世界和数字世界，允许物理和虚拟元素实时互动）和计算机视觉来实现体验。遥控车上装有摄像头，可以在行驶过程中扫描环境。玩家在房间周围放置视觉标记（黑白纸板门），称为靶标，系统将其用作参考点。 

计算机视觉可以帮助游戏识别这些标记，跟踪汽车的位置，并建立虚拟空间地图。这样，游戏就能准确地将轨道和障碍物等数字内容放置在现实环境中，使物理运动与屏幕上显示的内容同步。

‍

利用视觉人工智能教授虚拟宠物

Peridot是一款由Niantic（《口袋妖怪Go》背后的同一家公司，《口袋妖怪Go》是将计算机视觉应用于AR游戏的最早和最流行的范例之一）开发的手机游戏，该游戏利用计算机视觉和增强现实技术，让照顾数字宠物的感觉与现实世界接轨。 

玩家可以通过喂食、玩游戏和带它散步等方式来照顾一只名为 "橄榄石 "的生物。当您在家中或社区中移动时，宠物会出现在您的手机上，与您一起探索，在地板上奔跑，对物体做出反应，甚至躲在真实的家具后面。

为了实现这一点，游戏采用了三维映射和语义分割等计算机视觉技术，系统利用手机摄像头扫描和了解环境。这有助于宠物识别不同的表面并做出反应，比如区分草地和水泥地，或者对椅子和树木等障碍物做出反应。 

‍

手部追踪和共享混合现实空间

Demeo》是一款数字桌面 RPG（角色扮演游戏），它利用混合现实功能，通过 Meta Quest 2 和 Quest Pro 等耳机将游戏带入现实世界。在最近的一次更新中，该游戏现在支持手部追踪和主机托管，使玩家可以使用自然的手部动作与游戏作品互动，并在本地多人游戏中与其他人共享同一个物理和数字空间。

例如，玩家可以一边玩 Demeo，一边抚摸自己的真狗--这是混合现实如何融合数字和物理空间的一个微小但有意义的标志。这些功能都是通过计算机视觉技术实现的。手部追踪技术通过使用耳机的内置摄像头来检测和解读玩家手部的运动和位置，从而消除了对传统控制器的需求。 

‍

同时，主机托管使用空间锚点和点云数据来映射现实世界的环境，这样多个耳机就可以同步同一个虚拟空间。这样，同一房间内的玩家就能以相同的位置看到游戏棋盘和彼此，从而营造出围坐在共享虚拟桌面旁的效果。