科技魔方

基于微软MRTK工具,Nreal推出升级版手势识别功能

AR/VR

2022年08月18日

  8月18日消息,Nreal宣布更新AR开发平台NRSDK,本次更新带来了升级的手势追踪API、眼球追踪SDK、手柄摇杆支持等新功能。据悉,Nreal利用AI技术来优化AR眼镜(Nreal Light、Nreal Air)的手势追踪功能,并在微软跨平台AR开发工具MRTK中引入对手势追踪API的支持。实际上,NRSDK使用的手势功能基于两个MRTK应用:Hand Tracking Hub和Startup Scene。

  据青亭网了解,Nreal上个月在AR眼镜产品中引入手势追踪功能,本次更新后,该功能将结合专门训练的深度神经网络,来检测用户双手在3D空间中的关键点位置。应用场景方面,Nreal通过优化手势识别技术,可能会为用户带来更加自然的广告交互体验。此前青亭网就报道,该公司预计在AR眼镜中引入广告功能。

  而眼球追踪功能,猜测仅支持Nreal Light眼球追踪版,开发者可以通过更新的NRSDK为该设备开发基于眼球追踪的AR应用。

  总之,本次更新带来了多项与交互、用户体验、UI相关的新功能,具体如下:手势交互,包括按钮、对象缩放和滚动 手部骨骼网格和手势 眼球追踪 平面检测 语音转文字 手势菜单UI 摇杆支持 非本机键盘支持 预加载资产,如熔岩和照明 预加载的对象,例如钢琴

  参考:XRToday

+1

来源:青亭网

推荐文章