虎牙宣布开放AI虚拟“数字人”能力 发布虚实结合开放平台HERO

南派资讯:日前,虎牙在广州举办以“开放、连接、预见”为主题的“虎牙LiveTech大会”。会上,虎牙发布了两项在直播行业最新的技术成果:首个小程序开放平台和首个虚实结合开放平台HERO。虎牙CEO董荣杰在大会上表示:随着5G的到来,普通用户的流量不再是瓶颈,直播将真正迎来5—10倍增长空间的爆发,虎牙将在技术开放和虚实结合两个方向发力,打造更加繁荣的内容生态,为未来的交互创造更多可能性,并运用5G+AI给直播内容带来革命性的升级。

虎牙宣布开放AI虚拟“数字人”能力 发布虚实结合开放平台HERO

据悉,此次虎牙LiveTech大会是直播行业首个纯技术类型的发布会。谈及此次发布会的目的,虎牙CTO赖立高表示:“技术驱动娱乐”是虎牙一直以来的发展理念,而“开放”则是一直存在于虎牙技术的基因之中。在过去数年,虎牙以开放和连接的姿态,在直播技术方面持续领跑行业。现在,虎牙已经做好了更高层面开放的准备,希望让全行业共享虎牙的技术成果,携手广大的开发者、公会及厂商、合作伙伴群体,共同打造更繁荣的直播生态。

5G的到来和AI技术的进一步发展,为虚拟形象在直播中的运用提供了天时地利。目前,多家头部直播、视频平台已经加紧在虚拟形象及相关技术的研发脚步。虎牙技术总经理、AI技术负责人许佳表示,虚实结合技术将令直播在场景、人物和内容情节等方面彻底突破时间和空间的限制,赋予直播颠覆级别的内容升级。在发布会上,许佳宣布,虎牙先于行业正式启动虚实结合开放平台HERO(Huya Extended Reality Open-platform),并发布基于此平台诞生的第一个直播AI“数字人”——虎牙与DK公会合作的数字人形象“晚玉”。

虎牙宣布开放AI虚拟“数字人”能力 发布虚实结合开放平台HERO

在展示中,“数字人”晚玉在体态、动作,以及眼睛、皮肤和头发等细节都与真人无异,而技术则赋予了真人主播不具备的街舞等才艺。许佳表示,“数字人”的背后,是虎牙全面整合的一套完整解决方案,这其中包含建模、驱动和渲染这三大核心技术,涵盖3D重建、人脸结构化、动作迁移和实时渲染、AR融合等多项关键技术运用。以建模技术为例,在“数字人”晚玉上,虎牙扫描了2000万面超高精度拓扑的模型,通过肌肉和骨骼绑定后,可驱动的表情面数超过4万个。在肢体上骨骼动作支持超过70个自由度,可真实还原日常动作及跳舞等各种高难度才艺。

据许佳介绍:“在HERO平台中,我们开放了数字人运用到的相关接口和技术,让主播和开发者可以用自己的设备构建自己喜爱的形象和AR应用玩法。截止到目前,已有包括腾讯,Facegood,万像科技,凌云科技等多家合作伙伴加入到HERO开放平台中。未来,我们期待将由更多公会、厂商和开发者伙伴加入到我们的生态当中。通过技术赋能,每个主播都可拥有‘数字人’。”


分享到:


相關文章: