基于visionOS 2,Apple Vision Pro 可以跟踪和增强预先指定的 3D 对象

除了改进手部追踪和增强场景理解能力外,visionOS 2 还引入了 3D 对象追踪,这是一种全新的追踪功能。

这些跟踪改进没有在 WWDC24 的主要主题演讲中宣布,但 Apple 工程师在在线提供的开发者会议上详细介绍了它们。

自推出以来,Vision Pro 已经能够跟踪指定的 2D 图像,例如标记和游戏板。在visionOS 2中,它也可以跟踪3D对象。

在编译应用之前,开发者必须将跟踪的 3D 对象作为 USDZ 3D 模型提供给其 Mac 上的“创建机器学习”工具。Create ML 将为每个对象训练一个神经网络,该神经网络将被烘焙到应用程序中。

这意味着用户无法提供自己的任意 3D 对象,并且跟踪新对象需要更新应用程序。尽管如此,对于商业和教育用例或跟踪常见对象来说,这可能是一个非常有用的功能。

该系统将提供一个具有比例和方向的边界框,开发人员可以使用它来将虚拟对象锚定到跟踪的对象上,甚至用 3D 效果增强它们。

来源:uploadvr

(0)
上一篇 2024年6月12日 上午7:34
下一篇 2024年6月12日 上午7:49

相关推荐

发表回复

登录后才能评论