虚拟人生于游戏,不止步于游戏
虚拟人并非一个单一的技术,而是多重技术的集合产物。
根据相关定义,虚拟人是指通过计算机图形学、图形渲染、动作捕捉、深度学习、语音合成等技术,打造出的具备数字化外形的虚拟人物。
备受粉丝追捧的“初音未来”就是一个典型的虚拟人,它拥有优美的人物造型,具有辨识度的嗓音,能互动甚至还能开直播演唱会。
从“初音未来”到“洛天依”,从数字黄仁勋到虚拟航天员记者小诤、从捉妖人柳夜熙到时尚达人“星瞳”,从全息演唱会到虚拟人综艺,今天的虚拟人已经成为一个蓬勃发展的产业,并在各个领域发挥重要的价值。
今天的虚拟人产业站在科技和人文的十字路口,一方面它的形象创建和互动体验高度依赖背后的技术,另一方面它的IP和人设则高度依赖人文和情感的深度注入。
如果说虚拟人是一座冰山,那么我们看到的部分就是冰山水面以上的部分,而看不到的水面以下则是支撑虚拟人的底层技术。
接下来我们就以“星瞳”为例,看一看虚拟人背后的技术。
这位登上央视舞台的虚拟人星瞳,它诞生于游戏,它的成长依赖游戏技术但它的意义却超越游戏。
根据公开的资料,星瞳诞生于2018年,最早是游戏QQ炫舞的其中一位NPC,在2019年的时候,腾讯互娱对星瞳的建模和3D形象进行了升级,星瞳开始走向更广泛的用户视野。
如今,星瞳不仅是QQ炫舞的虚拟形象代言人,更是一位在B站积累超过26万粉丝的时尚虚拟博主。
潮流的造型、出色的穿着品位、湛蓝的眼眸、呆萌的脸蛋、娴熟的舞蹈功底、优雅的互动谈吐......星瞳的确让喜欢她的众多粉丝眼前一亮。
而这背后是腾讯互娱在资源与技术上对其不遗余力的重视与支持。
不得不聊一聊星瞳背后的技术,虚拟人制作主要涉及建模、驱动和渲染三大技术。
首先,3D建模为构建虚拟人形象的基础,重点在于实现细节的精细还原;
其次,通过将捕捉采集到的动作驱动虚拟人模型是目前3D虚拟人动作生成的主要方式,核心技术是动作捕捉;
最后,渲染技术解决了虚拟人的拟真程度的还原,以及虚拟人所处环境表现和效果的打造。
星瞳之所以形象如此鲜活,背后源于其团队对于虚拟人直播技术的投入。
3D虚拟人实时直播是多领域的技术集合, 它的复杂之处在于需要集合动捕的实时驱动、引擎的实时渲染、直播内容音画的实时同步。
这其中涉及到了动捕设备、面部驱动、材质结算、灯光渲染,渲染引擎、直播内容音画等多个耦合环节的精准对接,任何一环只要有一个小的差错,画面就会惨不忍睹。
为了啃下虚拟人3D实时直播这块“硬骨头”,腾讯互娱内容生态部统筹了内部各个技术团队的开发资源,从0开始打造了一套基于Unreal Engine4的实时驱动技术管线;同时与Epic、FACEGOOG等公司战略合作,实现了更多高难度的直播效果。
真正让虚拟人发挥更大价值,除了“好看的皮囊”还需要“有趣的灵魂”,毕竟,虚拟人最终的落脚点并非“虚拟”而是“人”。
可以看到,虚拟人技术的积累和突破离不开游戏企业的前瞻布局和研发积累,本质上是游戏技术发展到现阶段,已经有能力‘走出去’,可以赋能更多上下游产业。
脱胎于游戏的虚拟人技术已经发展成为交叉覆盖计算机图形学、人工智能、虚拟现实等互联网前沿学科的“新物种”,在众多领域有着极其广泛的应用。
虚拟人产业并没有止步于虚拟偶像这一细分赛道,如今,它早已走向了更广泛的应用场景。
Scan QR code with WeChat