科技魔方

Lens Studio更新4.28版,新增持续性AR、双手追踪、面部遮挡等功能

AR/VR

2022年08月30日

  近期,Snap AR滤镜开发工具Lens Studio更新4.28版,本次更新带来思想新功能:空间持久性(Spatial Persistence)、(语音)问答服务、双手追踪和面部遮挡。此外,还优化了VoiceML功能,为语音识别模板添加法语识别功能。以下是本次更新的详细内容:

  空间持久性

  此前,Snap已经推出LBS AR功能Landmarker,允许开发者将AR滤镜固定在景点等特定的地理位置。相比之下,Lens Studio的空间持久性功能可以在任何地方使用,并建立在云端持久储存方案之上。这意味着开发者可以创作应用更广泛的LBS AR滤镜,这种滤镜将允许用户把AR内容固定在任意的位置,并长时间保存,日后再次回到该位置还可以查看之前保存的AR数据。

ezgif-3-7fefd2a60d

  问答服务

  这是一项基于VoiceML的新功能,可用于开发互动性强的问答式AR滤镜。其玩法是,当用户通过语音向AR滤镜提问,滤镜便会识别语音信息,并显示预设的文本答案。据悉,该功能可识别多种类型的问题,可帮助用户了解趣闻或是各学科知识。开发者可设置主题、问题和答案,每个AR滤镜最多可支持15次问答。

ezgif-2-cc5b3ed48e

  双手追踪

  手势交互是一种有趣的AR玩法,本次更新后Lens Studio将支持双手3D追踪,开发者可以利用该功能为双手开发有趣的AR滤镜、增加沉浸感。这项功能也算是对AR眼镜的优化,Snap指出,双手追踪与AR眼镜(Spectacles)一起使用效果最好。

ezgif-2-7e8f069df9

  面部遮挡

  这项功能指的是,当你的手、头发遮挡住面部时,AR面部滤镜将透视出遮挡住脸的部分。也就是说将滤镜与人脸进一步融合,识别遮挡关系并模拟物理特性,而不是飘浮在手或头发上,这将有望大幅提升AR面部滤镜的逼真感和沉浸感。

  ASR模板支持法语

  Lens Studio的自动语音识别(ASR)模板开始支持法语,这意味着结合语音转录、关键字检测的AR滤镜也将支持法语。

  3D全身追踪添加手部

  这是对Bitmoji自定义组件功能的优化,它将允许用户把Bitmoji虚拟形象引入到全身AR滤镜中,并通过手部节点追踪来操控。参考:Snap

+1

来源:青亭网

推荐文章