这个AR家具预览demo让我看到VST头显的未来

　　之前我们看到过很多AR家具、家装的应用，最头部的莫过于宜家，它也一直紧跟苹果ARKit步伐，而这次Shopfiy工程师则展示了基于苹果最新的RoomPlan​的AR家装预览。

　　6月份的WWDC我们了解到RoomPlan是一项充分结合了AI重磅功能，它能够识别房间内物体的几何形状，甚至构建一个房间的三维场景，这对今后的AR/MR场景至关重要。

　　而苹果RoomPlan也见证了AR应用的一些进展：

　　早期的AR主要以单个物体“虚拟投放”为主，也就是说将一个虚拟的物体投放到真实环境中，这的确能带来不错的效果，宜家IKEA Place确实体验也非常出色。

　　之后能在真实环境中投射多个虚拟物体、或大型虚拟场景。宜家IKEA Studio就是如此，它的特点就是支持多个虚拟物体同时投射，但仅支持配备LiDAR的iOS设备，前提是先对房间进行扫描。

　　现在则可以将“真实物体投射到虚拟场景中”，和第一阶段反了过来。基于LiDAR的房间扫描能力，和苹果原生RoomPlan能力实现投射整个虚拟场景，把需要的物体真实物体抠像显示，具体可以参考上面的视频。应用场景包括：把你家3D场景放进手机，然后到卖场仍然可以预览具体每一件家具在你家的摆放效果。

　　这段视频展现了几个能力：1，房间级定位、追踪、识别能力，大规模虚拟场景的AR投射，效果稳定;; 2，场景几何理解能力，iOS 16上线的智能抠图，而ARKit 6中RoomPlan则是实时的智能3D抠图。将真实物体实时抠像，视频中是一个沙发; 3，相比沙发是静态放置，人则是动态移动的，过程中还融合了人体的实时抠像，在这个场景中，比坐在沙发上时可将腿、鞋等扣除来，而背景依然是虚拟场景，边缘处理也很好。

　　这样一来，我们就能看到真实、虚拟融合的，房间级别的MR交互能力，由此可见苹果RoomPlan对于发展AR和MR将起到至关重要的作用​。

　　实际上，这类场景也早在HoloLens 1代发布会上演示过，以及Meta近期推出的《The World Beyond》，虽然并不是创意上的突破，但基本上把VSR MR头显的玩法潜力给展露出来。