将眼控技术嵌入骁龙845芯片 晟道投资被投企业七鑫易维宣布与高通合作

3月16日,晟道投资被投企业——眼球追踪控制技术解决方案商七鑫易维宣布,已与高通签订了眼控技术的官方合作协议,该协议授权七鑫易维眼控技术用在高通新一代骁龙845平台上。

将眼控技术嵌入骁龙845芯片 晟道投资被投企业七鑫易维宣布与高通合作

据了解,骁龙845处理器相比骁龙835性能方面提升10%,功耗方面降低了15%。而骁龙845与骁龙835最大的不同在于它引入了一个“安全处理单元”,即一个独立加密芯片,高通把它整合到了处理器(CPU)中,主要用于存储用户的指纹、虹膜、语音、面部等隐私信息。而提供这一技术方案之一的技术服务商正是七鑫易维。

眼动追踪技术原理在于,人眼看向不同方向时,眼部的细微变化产生可以提取的特征信息,计算机通过图像捕捉或扫描提取这些信息,实时追踪并进行响应,从而达到获取眼动数据的目的。

将眼控技术嵌入骁龙845芯片 晟道投资被投企业七鑫易维宣布与高通合作

目前七鑫易维采用眼动技术方案是瞳孔-角膜反射向量法,相应设备通常需要配备红外光源、光学传感器和相应算法芯片,这也是当下行业的眼动技术的主流方案。如苹果iPhone X的Face ID——只有当用户睁眼注视iPhone X 时才会成功解锁,就采取了初级的眼动识别技术,也引发了包括三星、华为等手机厂商的跟随。

将眼控技术嵌入骁龙845芯片 晟道投资被投企业七鑫易维宣布与高通合作

现在,眼动追踪控制技术已正式被生态巨头高通采纳。七鑫易维已为骁龙845平台提供了完整的眼球追踪技术解决方案,并在845 VR一体机上验证了该方案。

将眼控技术嵌入骁龙845芯片 晟道投资被投企业七鑫易维宣布与高通合作

该方案充分利用了骁龙845平台针对XR(AR/VR)所提供的各项技术优势:

  • 利用骁龙845平台的Adreno™ 630 GPU,结合高通的SNPE(Snapdragon Neural Processing Engine),推出了适用于移动平台的眼球追踪深度学习算法,深度学习算法的应用使眼球追踪的适用范围大大扩展,比如戴眼镜的人群、不同的人种及其他复杂环境等。

  • 结合骁龙845平台的Hexagon™ 685 DSP与高通的FastCV机器视觉算法库,眼球追踪算法速度得到进一步的提升,大大降低了对CPU和功耗的压力,使眼球追踪算法更加适用于移动平台。

除了VR,七鑫易维的眼球追踪技术还应用在基于骁龙平台的AR产品中,多个AR眼镜企业已经展开了与七鑫易维的合作,具体技术应用场景包括:

  • 注视点渲染:利用人眼的特征,只对注视点区域的显示进行高清渲染,可以大幅度降低显示渲染压力,降低渲染延迟,减小用户的眩晕感,降低硬件成本。

  • 眼控交互:利用人眼视线在AR或VR中进行辅助交互,结合其他交互手段,可以达到更加自然的交互体验。

  • 眼动数据分析:用户在AR/VR中的眼动数据对商家来讲是非常有价值的,可以用来分析用户的注意力、兴趣点、兴奋度等各种情绪信息,应用于市场分析、广告分析等领域。同时,这些数据也可以用于心理学研究。

  • 瞳距自动检测:通过眼球追踪技术检测出用户的瞳距并通过电动马达等机械结构为用户进行自动调节,使用户可以体验更加清晰和完美的AR/VR视野场景。

  • 虚拟社交眼神交互:在AR/VR社交应用中,可以完美复刻出用户的视线和眼睛运动,比如眨眼、眯眼、瞪大眼睛等,这样使社交应用更加真实,用户之间的交流会更加顺畅。

  • 虹膜识别活体检测:七鑫易维已经推出了结合虹膜识别的眼球追踪方案,该方案可以实现低成本的活体检测,在AR/VR电商领域可以有很好的应用。

  • 眼疾辅助诊断与康复:七鑫易维的眼球追踪可以实现特定需求的校准和追踪,应用于弱视、斜视等眼睛类疾病的辅助诊断和康复训练。

七鑫易维CEO黄通兵表示,除在AR/VR领域外,基于高通骁龙845芯片,七鑫易维将在2018年下半年陆续推出应用于手机、平板等移动电子设备的眼球追踪技术以及解决方案,应用的场合包括:

  • 注视感知:通过眼球追踪技术,进行人眼视线检测,判断用户的注视区域。例如当人眼的关注视线落在手机屏幕上时,可认为此时用户传达了交互的目的,即注视感知。而在用户视线偏离手机屏幕时,视线检测结果将帮助手机不要进行“非注视”下的操作;

  • 活体检测:基于眼球追踪的活体检测技术,相对传统生物识别系统的活体检测技术具有更高的鲁棒性,红外成像技术使眼球追踪活体检测技术具有全天时特性,亦可以结合人脸、虹膜等生物技术一同使用,例如在Face ID中,可以防止在用户不知情的情况下,其他人利用其面部特征解锁设备;

  • 眼动交互:基于骁龙845芯片,开发包括硬件、图像算法、视线算法等一系列眼球追踪技术,实现用户用眼睛操作手机的目的,目标在于提高人机交互效率和用户体验。或者在手机与显示器结合的场景中,作为辅助交互手段。

除上述领域外,高通还与七鑫易维在医疗、智能驾驶、智能家居等多个领域进行合作。

成立于2009年的七鑫易维,是国内专业从事眼动控制、视线追踪等机器视觉技术研发和产品销售的技术方案商。作为中国高新技术企业领军者之一,七鑫易维最早发布了全球首款VR眼球追踪配件,并最早拥有了基于人工智能的眼球追踪算法。作为高通的眼球追踪技术合作伙伴,七鑫易维将持续用眼控技术赋能XR与5G,并保持眼控技术在中国与世界的领先性。

2018年2月七鑫易维获得了新一轮融资。本轮投资由晟道投资、财政部中小企业发展基金联合领投,其他投资方还包括中关村发展集团、杭州道昇。

七鑫易维在本轮融资前,曾获高通公司连续三轮投资,并入选英伟达“创始计划”(Inception)以及HTC VIVE X加速器计划。据了解,本轮融资资金,七鑫易维将主要用于眼动追踪技术在VR头显设备小型化、芯片化方面发展,其次将用作与多种业态加深融合的市场运营。

做卓越企业善意的合作伙伴

晟道投资,是武汉当代集团旗下一支以新消费、TMT为投资方向,以PE为主、兼顾VC的人民币股权投资基金。以“做卓越企业善意的合作伙伴”为愿景,在产业端与资产端搭建资本的桥梁,撬动并实现1+1>2的产业势能。


分享到:


相關文章: