科技魔方

Meta发布支持检测舌头伸出的面部追踪OpenXR插件

AR/VR

2023年12月20日

  在日前的v60 SDK(Unity和Native)中,Meta发布了一个包含检测舌头伸出的新版本面部追踪OpenXR扩展。尽管Meta Avatars SDK尚未纳入这个功能,但在将SDK更新到v60之后,第三方的Avatar解决方案已经可以通过所述OpenXR扩展来支持舌头检测。

  例如,X用户コレヂャン就通过全新的VRCFT模块进行了演示。

  自开始支持以来,Meta就一直在积极优化眼动追踪和面部追踪。在2022年11月,这家公司发布了包括Aura在内的多个演示应用,目标是向社区展示眼动追踪和面部追踪等方面的性能效果。

  尽管相关演示展示了相当出色的面部和眼部动作,但系统一直无法支持舌头,难以实现吐舌头等动作。

  但现在随着v60 SDK(Unity和Native)开始提供包含检测舌头伸出的新版本面部追踪OpenXR扩展,Avatar将能够实现各种基于舌头的动作,包括吐舌头。

  当然,Meta Avatars SDK尚未纳入这个功能,但第三方的Avatar解决方案已经可以通过所述OpenXR扩展来支持舌头检测。例如在用于ALXR的新版本VRCFT中,开发者korejan为QuestPro纳入了Meta提供的舌头追踪功能(ALXR是一个基于OpenXR的跨平台PC串流应用,类似于Virtual Desktop,SteamLink和Quest Link等工具。VRCFT则是一个用于ALXR的面部追踪模块)。

  X账号コレヂャン的演示通过Quest Pro和VRChat进行了展示。如下面的视频所示,我们可以看到用于追踪面部区域的系统可以同时追踪舌头,包括吐舌头等动作。

  新版本的VRCFT托管在GitHub。舌头追踪可通过名为VDX的应用程序支持Air Link和Virtual Desktop。你可以将扩展作为ALXR的本地模块安装。如果使用ALVR串流应用,则可以将其作为远程模块安装。

+1

来源:映维网

延展资讯