微软新研究:结合AR和VR来优化远程会议体验

5月6日消息,微软科研团队研发了一种将VR/AR技术结合的远程会议方案:VROOM。说白了,其实就是一个人在VR中控制自己的虚拟形象,与另一头戴AR头显的人实现虚拟的远程交互,但它最大不同在于,还使用了一个移动的机器人。

这个机器人配备了360°全景摄像头,相当于一个人在VR中远程控制机器人来代表自己,不过另一头的人通过AR头显扫描机器人后,还能看到叠加在上面的AR虚拟形象。同时,戴VR头显的人可通过机器人的摄像头,以第一人称实时观看到另一头的真实场景,比如白板等。

与《Spatial》等AR虚拟远程会议应用相比,微软的这个新方案可以让参会者通过视频透视、VR等技术,体验与远程的其他人共处一室的感觉。

VR可追踪人的头部姿态、手势,并在AR中呈现出来,甚至还可以模拟人的注视点、嘴唇动作,增强虚拟形象的生动感。此外,还可以通过VR来远程控制机器人的移动。

而结合AR技术的好处是,被远程控制的机器人不再需要使用2D屏幕来显示另一个人的视频,而是直接以AR的形式展示动态的形象。未来,使用任何搭载360°摄像头的机器人,几乎都可以实现该方案。除了1对1交互外,还预计将该方案用于更多人的远程会议中。

使用场景方面,它可以用于协作设计、远程学术会议、社交、博物馆等。