Hololens 可以代替导盲犬小Q吗?

Hololens 可以代替导盲犬小Q吗?

十几年前的一部《导盲犬小Q》让人感受到了狗狗对主人的爱与忠诚,在影片开头,导盲犬的训练也给人留下深刻印象,训练的枯燥重复对于狗狗和训练师都是一种挑战,由此可知,想要训练出一条合格的“小Q”并非易事。而在中国,导盲犬的稀有程度堪比大熊猫,就数量而言甚至比大熊猫还少。

Hololens 可以代替导盲犬小Q吗?

除去小Q,影片的关注点自然落在了以小Q主人渡边先生为代表的盲人群体上。就目前来说,盲人出行除了盲杖和明眼人的陪伴外,还没有其他方便易行的方式。而以目前的科技水平,恢复视力的几种方案也都还缺少普适性。

Hololens 可以代替导盲犬小Q吗?

为此,HoloLens提出了听觉增强现实,即以听觉代替视觉。既然视觉难以恢复,那就干脆用耳朵来判断物体的方位。毕竟如果可以听到障碍物的具体的位置,那么无需视觉,也可以畅行无阻。

于是,喜爱捣鼓视觉数据的HoloLens便以此为目标,使用摄像头和红外传感器扫描环境中的所有表面,创建出空间的3D地图,并将自身的位置精确到厘米。

Hololens 可以代替导盲犬小Q吗?

就如上图所示,数据采集系统将A列为解析对象后,会为场景里的每一个物体标号并用一种独一无二的语音或声效来代替它的存在,就像每个人的声线不同,为了方便识别,我们也赋予物体不同的声调(图B),但是目前这项标记的工作还需要研究人员协助完成。接着,HoloLens会开始扫描物理空间(C),并生成物体表面的3D网格(D)。在E这个数字化空间中,那根粉色大香肠一样的东西就是虚拟导航,研究人员还可以在E中继续放置或编辑物体,最后在F中计算导航路径以及生成虚拟指南动画。

这样下来,物理空间内各物体的位置HoloLens就已了然于心,那么它到底是以怎样的方式提示佩戴者的呢?

研究人员使用Unity游戏开发平台设计了一个可以在实验空间中跟踪用户头部的应用程序,通过构建空间内虚拟物体的模型,能够让空间内的物体自己张嘴告诉用户自己的位置,并且随着距离的接近,声音的音调也会相应提高。用户还可以通过几种控制模式主动选择让哪些物体张嘴闭嘴。

避障和活动场景探索模式

Hololens 可以代替导盲犬小Q吗?

红色圆柱体外的物体不会主动朝你BB,但是一旦有物体侵入红色圆柱体内,物体就会和用户交流一番:喂喂喂,我是椅子,我就在你前面两步,你可别绊到我了。而且当用户行走时,红色圆柱体的体积会变大,以免用户来不及刹住脚步撞到正在BB的物体。

扫描模式

Hololens 可以代替导盲犬小Q吗?

扫描模式下,视线前方大约120度的蓝色锥形区域内的物体会自觉的从左到右依次介绍自己名字叫什么,家住哪,从哪来……

聚光灯模式

Hololens 可以代替导盲犬小Q吗?

就如模式的名字一样,HoloLens会自动选择视线前窄椎体内最近的那个物体,让它成为全屋子的焦点,听它自我介绍一番后就可以问它:你的梦想是什么?

除此之外,还有目标选择模式。用户选中想要找到的物体,按下按钮,它就会一直发出声音,指引用户找到它。这个功能,别说是盲人,很多爱丢三落四的糊涂蛋也很需要。

研究人员还邀请了几位盲人亲测HoloLens的导航,体验者表示:feel cool~

Hololens 可以代替导盲犬小Q吗?

HoloLens会根据扫描得出的图形为用户规划线路

Hololens 可以代替导盲犬小Q吗?

若是用户位置发生了改变,便会规划新的路线

Hololens 可以代替导盲犬小Q吗?

在实际使用中,仿佛就是跟着一根大香肠在走路,而且这根大香肠一路都在喊着“follow me follow me ”

就在今年年初的时候,微软还公布过一款VR手杖canetroller,可以帮助视障用户驾驭VR设备。

Hololens 可以代替导盲犬小Q吗?

该手杖具有三种反馈方式。首先当手杖接触虚拟物体时,制动装置可以提供阻力从而产生手杖与真实物体间的碰撞感。手杖的“振动触觉反馈”能够模拟手杖从物体表面划过时的触感。总的来说,前两种反馈与普通VR手套的功能差不多,而第三种则与上文HoloLens的声音引导相似,通过3D听觉反馈模拟现实世界的声音。

在报道中,这根手杖还是与HTC VIVE配套使用的,不知能否与HoloLens进行连接。倘若可以,HoloLens与canetroller双剑合璧的话,既能以语音指路,又能用手杖探路,想必会令视障人群的出行变得更为便捷。

当然,中国的无障碍设施大家也都懂的,盲道违停,盲道种树,盲道挖坑,还有盲道上方有斜拉的绳索或枝桠的也不在少数,路边的黄色盲道干脆就只剩下了点缀地砖的作用。所以说,想要真正帮助盲人,除了科技设备的辅助,还需要从人们身边的无障碍设施优化做起。

Hololens 可以代替导盲犬小Q吗?


分享到:


相關文章: