你手機上的 AR,居然以爲世界是一張平面圖?

近日,美國 AR 特效服務公司 Octi 宣佈獲得 750 萬美元種子輪投資。參投機構包括Shasta Ventures、I2BF Ventures、Bold Capital Partners、Day One Ventures、Human Ventures, Live Nation 及 AB InBev,個人投資者則包括前 Pandora 與 Snap 執行官 Tom Conrad、WeWork 首席產品官 Shiva Rajaraman、Adobe 首席產品官 Scott Belsky、A&E Networks 主席 Abbe Raven 與 Joshua Kushner。

目前市面上的大部分 AR 產品仍然是基於平面的,包括 Apple 的 ARKit。這就是說,AR看到並進行增強的世界是 2D 的,而非 3D 。用 2D 的方式去理解 3D 的現實世界,這導致 AR 無法識別物體或人體的的縱深,也很難捕捉並理解人體及其動作,削弱了用戶使用過程中的真實感。

而 Octi 旗下的同名產品能夠在不添加額外傳感器的前提下,優化手機等低功率設備的 AR 效果。具體到人體識別方面,Octi 融合了多層神經網絡技術,包括人體骨架檢測、實例分割、3D 重構以及手勢識別等,讓智能手機僅僅依靠單目視覺,就能從場景中提取清晰的人體動作。底層技術的革新,將為 AR 技術的普及與落地帶來更大空間。

你手機上的 AR,居然以為世界是一張平面圖?

人體識別得到的 2D 及 3D 模型

公司聯合創始人兼 CEO Justin Fuisz 表示,Octi 搭建了一套複雜的機器學習與機視覺技術體系。以人體動作為例,它需要先辨別出人體的關鍵點,如眼睛、鼻子、手肘和臀部等,然後用這些點構建骨架模型。這些模型將被進一步還原為 2D 或 3D 模型,幫助機器理解人體動作,使得更豐富、交互更流暢的 AR 效果成為可能。

Fuisz 認為,這一技術將能被運用到多個不同領域,如時尚、健身、娛樂及遊戲業。

以一個最近的落地應用為例。近期 Octi 宣佈與OneTeam Collective達成戰略合作,後者是美國國家橄欖球聯盟球員協會內部的加速器。這筆合作為 Octi 帶來了一張大訂單——為 NFLPA 超過 2000 名運動員創造 AR 形象,粉絲們可以與這些形象互動並進行視頻創作。其實早在今年1月,Octi 就已在這個加速器的路演會上拔得“球員市場營銷”項目的頭籌。接下來,Octi 還將為 NFLPA 開發基於 AR 的 3D 體感遊戲。

你手機上的 AR,居然以為世界是一張平面圖?

左:3D AR 效果示例,給運動中的人;右:基於深度估計模型,Octi 能夠辨別遠近

除了為企業提供 AR 方案之外,Octi 也發佈了自己的 iOS APP。儘管目的是為了向潛在的企業客戶提供直觀的技術展示,但 Fuisz 表示,個人用戶也可以下載這款 APP,在智能手機上體驗 3D 版本的 AR 技術帶來的更加流暢、真實感更強的體驗。


分享到:


相關文章: