她叫Siren,不是人,也可以是所有人

她叫Siren,不是人,也可以是所有人

今天,介紹一個人,名字叫Siren(塞任)。

她叫Siren,不是人,也可以是所有人

朱唇輕啟

朱唇輕啟,嘴角含笑,這半張臉很普通。

她叫Siren,不是人,也可以是所有人

Siren

朱唇輕啟,嘴角含笑,這半張臉很普通。

而整個人,看上去也很普通。

但她不普通,因為,她,不是人。

作為數字虛擬人,她有自己的名字,Siren,意為古希臘傳說中半人半鳥的女海妖。

由騰訊互娛事業群的NEXT Studio 與Epic Games、Cubic Motion和3Lateral等業內各領域頂尖公司聯合團隊開發而成。

她,實際上也是人。

她叫Siren,不是人,也可以是所有人

姜冰潔

她的面部形象,來自於中國的女演員姜冰潔。

但Siren 也可以是所有人,她能夠惟妙惟肖地“演繹”出其他人的表情,包括你的。

她叫Siren,不是人,也可以是所有人

惟妙惟肖地“演繹”出其他人的表情

這項成果代表了目前實時渲染技術的業界頂尖水平。

Siren 所有的動作表情都是實時捕捉並實時渲染。

只要將這套動捕設備,戴在你頭上。它能實時跟蹤200多個面部特徵點,並將這些數據實時地映射到Siren的面部Rig(骨骼綁定)驅動Siren的3D臉部模型。

動作表情以每秒60幀輸出在屏幕上。

最最重點的是——數字虛擬人是可以基於任何人的樣子進行掃描,掃描之後,TA就是被掃描者的復刻和分身了。

而驅動這一數字虛擬人的表情和動作的,可以是其他人。

這樣,很多奇妙的事情就可以發生了。

周杰倫曾經幻想,能穿越時空,回到30年前,跟鄧麗君合唱一首歌。

他說:那是多麼榮幸的一件事啊。

30年後,他真的,跟她,隔空對唱。

她叫Siren,不是人,也可以是所有人

隔空對唱

周杰倫沒有想到——這場機緣來自科技,是45名工程師耗2個月心血打造,這場重逢,讓兩個時代的歌手,在萬千目光中,共譜了一曲。

《速度與激情7》裡,保羅·沃克在不幸離世前,電影只拍完了八成左右的戲份,劇組是如何處理餘下未拍攝的呢?

她叫Siren,不是人,也可以是所有人

速度與激情7

導演只好用CG方式來製作數字替身,輔以3D跟蹤和相機運動匹配來完成剩餘鏡頭,他還找來沃克的兄弟拍攝沃克的戲份。

影片的結尾,導演把保羅之前的影像剪輯到一起,給影迷一份深刻動人的完美懷念。

過去,讓逝去的人重生,彷彿是一個無法實現的夢。科技讓一切變得可能。

Siren 的出現,可以讓人物“還原”,變得更簡單。

如果說3D“鄧麗君”、“保羅”像電影特效製作一樣,是一幀幀通過離線渲染摳出來的,那麼Siren則是實時渲染出來的,可以實時互動。

這個過程在15毫秒內完成,一般人幾乎感受不到延遲。

她叫Siren,不是人,也可以是所有人

讓人物“還原”

而為了追相片級的表現,整個開發過程,團隊都需要在不同光照條件和相機位置下對比真實照片和引擎渲染結果,一點點修正。

她叫Siren,不是人,也可以是所有人

對比真實照片

換衣服對於她來說,就是揮揮手,抖三抖的事

現在Siren不管是高精度的面部動捕,還有長時間的身體動作捕捉,都一步步的做到儘可能的接近真實。

有了它,你可以和任何一個“人”實時互動交流。

那麼有了Siren之後,會帶來哪些改變?

我們可以大膽想象,未來,你也可以像《頭號玩家》裡的主人公一樣,將自己的一舉一動映射到虛擬角色身上,他是通過魔幻眼鏡完成自由變身,而你通過Siren,完成置換。

她叫Siren,不是人,也可以是所有人

魔幻眼鏡完成自由變身

除了在遊戲中感受虛擬人的魅力,Siren在影視方向的想象空間也很大。

要知道,從替身到摳像,從人皮面具到真人倒模,在這些方面,電影的創意可謂層出不窮。

她叫Siren,不是人,也可以是所有人

電影的創意

有了Siren之後,你再也不用擔心這些流量小花鮮肉的演技了,形象掃一掃,剩下的表情驅動請交給真正的“演技派”。

當然對於老藝術家,我們也可以在他們年輕時,用數字化技術將他們定格在最美的時候,讓他們的才華在藝術作品中以最鮮活的姿態存在。

除了成為“復刻”的明星,Siren本身是不是也可以成為全能偶像?

完全可以啊。初音未來多火不用說,洛天依的名字你想必也不陌生,那麼對於更真實的Siren,潛力更是無限。

她叫Siren,不是人,也可以是所有人

全能偶像

出個MV,上綜藝,甚至開演唱會,代言遊戲都不是問題,如果被賦予人工智能,能夠想象的空間足夠大。

你也可以成為虛擬主播?

脫離各種後期加持,無需動漫製作,告別濾鏡、醫美,面對最考驗實時技術的直播,相信Siren小姐姐,也能應付自如,不用錄播,人設就立在那裡。

可能你所看到的女性Siren背後,驅動的是一個摳腳大漢呢。

還能變身智能語音助手?

Siren現在還需要真人驅動,未來,是否可以由AI驅動?那麼想象家裡像《銀翼殺手》裡,有一個虛擬伴侶或助手,想必很奇妙,叫你起床,關照你增添衣物,家裡的一切因為她而變得舒心,感覺擁有了一個田螺姑娘呢。

“高保真,實時渲染,可交互,虛擬數字人....."

這些技術亮點背後,是Project Siren背後站著的一群人帶來的嘗試。

這群由騰訊互娛事業群的NEXT Studio 與業內各領域頂尖公司聯合組成的開發團隊,正努力鍛造超真實虛擬偶像的可能性。

未來,充滿不確定性和挑戰,我們期待Siren的再一次“改變”。


分享到:


相關文章: