综艺破圈要“卷”技术,大张伟、张雨绮链接的虚拟人强在哪?

Xsens动作捕捉 2023-05-11 3437

近日,全球首档虚拟现实游戏闯关真人秀《元音大冒险》正式上线爱奇艺。首期节目中,大张伟、秦霄贤、小鬼-王琳凯、萧敬腾、徐梦洁、张雨绮六位玩家,通过人工智能技术链接虚拟数字人,在平行世界中开启奇幻的虚拟大秀舞台。

据悉《元音大冒险》中,所有数字人的实时驱动、虚拟表演秀,以及动捕游戏,均由百度智能云曦灵技术支持。同时,以希加加、林开开、叶悠悠为代表的百度数字人家族将与嘉宾共创全新感官舞台。节目在开播前预约人数突破120万,可见,以技术驱动综艺内容创新的时代正在到来。

综艺破圈要“卷”技术,大张伟、张雨绮链接的虚拟人强在哪?  第1张

(11位数字人技术均由百度智能云曦灵支持)

“多人实时互动”是数字人综艺核心难点

相较于常见的真人秀,虚拟人综艺的技术流程非常复杂。在极限的情况下,《元音大冒险》最多需要同时支持8位嘉宾的数字人形象实时同屏互动,实际录制中基本没有重来的机会,这对智能绑定、实时数据优化等技术都是前所未有的挑战。

具体来讲,首先要为数字人赋予“行为能力”。在节目录制前,对面部和身体进行特征扫描,为数字人形象赋予骨骼、肌肉等,并生成可由程序驱动的模型。

第二,为数字人接入“有趣的灵魂”。通过动捕设备的辅助,将真人与数字人的身体关节、肌肉“关键点”等匹配,配合动作捕捉后处理算法,即使真人与数字人形体完全不一致,也可以保证行动姿态、身体细节1:1还原。

综艺破圈要“卷”技术,大张伟、张雨绮链接的虚拟人强在哪?  第2张

(百度智能云曦灵全程支持数字人技术)

譬如在节目中,大张伟发现自己的虚拟形象林开开走路时一直扭胯,起初还以为是设计问题,张雨绮却一针见血指出他本人走路就在扭胯,姿势完全同步。这背后是百度智能云曦灵超过三年的技术沉淀,通过数百TB的影视级4D扫描和动作捕捉数据,结合人工智能算法,才能实现“所见即所得”的效果,让嘉宾在实时反馈的基础上“放飞”自我。

综艺破圈要“卷”技术,大张伟、张雨绮链接的虚拟人强在哪?  第3张

(大张伟驱动林开开演唱《new boy》)

百度智能云曦灵已形成“数字人综艺技术底座”

“通过《元音大冒险》的‘实战’,我们已经形成了可快速应用的数字人综艺技术底座。不仅让综艺效果大幅升级,更重要的是让制作效率提升一倍,内容生产成本降低50%。这一技术底座将为数字人综艺带来品牌IP及商业的双向收益。”百度数字人与机器人业务负责人李士岩表示。

作为全球领先的数字人平台,百度智能云曦灵主打用人工智能算法驱动生成数字人,不仅助力综艺破圈,还可以快速生成虚拟偶像、数字人主播、数字人员工等,实现效率更高、成本更低的数字人生产及内容制作。

综艺破圈要“卷”技术,大张伟、张雨绮链接的虚拟人强在哪?  第4张

(百度智能云曦灵平台核心优势)

同时,通过数字人直播平台,还可以实现24小时不间断的AI直播,为企业降低30%以上的运营成本。目前,百度智能云曦灵打造的几十位数字人,诸如中国日报数字员工元曦、央视新闻AI手语主播、央视网数字主持人小C、首个文博宣推官文夭夭、浦发银行理财专员小浦等,已经应用在金融、运营商、政务、文旅、广电、互娱、航天等领域。

综艺破圈要“卷”技术,大张伟、张雨绮链接的虚拟人强在哪?  第5张

(百度智能云曦灵打造的数字人纷纷“上岗”)

《元音大冒险》的奇幻旅程仍在继续,当综艺创新也开始“卷”技术,数字人还将为各行各业带来怎样的新增长?

The End