航天员物理世界与虚拟世界的墙正在被打破，你有感受到吗？电影

文章图片

文章图片

文章图片

物理世界与虚拟世界的墙是确实正在被打破，但是这不是从《头号玩家》、《失控玩家》两部科幻电影得出的结论，电影始终是电影。而且不只是这两部电影，比如《银翼杀手2049》，里面的女主角乔伊就是一个虚拟人物，她只能在投影机辐射的范围内出现，她美丽、善解人意，一直陪伴着K 。电影终归是电影，但是这种科幻形态并不遥远，因为现在数字虚拟人已经可以做的足够逼真，假以时日AI发展到一定程度，出现乔伊这样的虚拟人物是可以想象的。跟虚拟人物谈恋爱不太好，但是对一些独居老人等情感陪伴还是很好的，比如子女在外面打拼，对老人的关怀变少，数字虚拟人则可以完成充当一个关怀者的角色。
真正让人感觉到物理世界与虚拟世界的墙被打破的必须是与生活相关的，熟悉二次元的人一定都听说过一个虚拟的偶像人物——“初音未来” ，这就是一个具有代表性的数字虚拟人，成为了很多人喜欢的虚拟偶像人物。
【航天员|物理世界与虚拟世界的墙正在被打破，你有感受到吗？】初音未来除去卡通的形象外因为当时技术的限制人物模型现在看来也显得粗糙了，初音未来发行过很多歌曲，如果我们仔细看会发现唱歌的嘴型对不上，人物的表情也只是简单的几个卡通形象。初音未来毕竟是早期，这些年数字虚拟人相关技术的发展非常的迅速，虚拟形象制作越来越精细，比如3A游戏玩家熟悉的《赛博朋克2077》里的基努·里维斯，已经可以代表目前游戏制作的高端水准了。
虽然玩过了很多3A大作，但是新华社与腾讯旗下工作室Next studio联合制作的数字航天员小诤还是让我感到惊讶，与前面的相比，这个才是一个虚拟走入现实的活生生的例子，才是说明物理世界与虚拟世界的墙是确实正在被打破的例证。
有两大亮点值得关注：

模型制作惟妙惟肖，汗毛、毛孔、发丝纤毫毕现，逼真程度升级；
每个表情都能表现出当前的情绪；

逼真的模型有很多，但是能细到放大看可以发现脸上的毛孔与汗毛程度的我是第一次见到，更有突破性的是情绪的传达。相信很多人去过蜡像馆，很多人物的蜡像制作也是惟妙惟肖，但是它在人们心中依然是个死物，因为它无法行动，也没有情绪、情感。在虚拟世界中通过技术让人物动起来很容易，各3A大作的人物也都有表情的变化，但是与真人相比差距还是很明显的，我们看电视会看到老戏骨的表演一颦一笑、一个眼神、一个微表情都能传达很多的信息，这就是活生生的人，也是以往的数字虚拟人无法突破的瓶颈，所以数字航天员小诤能表达情绪是一个很大的突破。
怎么做到的呢？这就不得不提小诤背后的技术提供者——腾讯旗下工作室Next studio 。其实早在2018年， NExT Studios与Epic Games、Cubic Motion和3Lateral等公司联合团队就开发出了当时业界最高水准的数字虚拟人Siren 。除此之外，还开发了一套基于3A标准的动捕动画生产管线xMoCap?以及高质量人脸制作管线xFaceBuilder? ，简单说下：
其实就是我们有时看到的科幻拍摄场景，模特穿上单色的服装，在身体的关键部位，如关节、髋部、肘、腕等位置贴上一些特制的标志或发光点，相机连续拍摄模特的动作，最后将图像序列保存下来处理得到其运动轨迹。如果关键点在脸上就可以捕捉表情，大家可以看上面的动图，小诤喜怒哀乐表情时旁边的点阵图会动，表情其实就是根据记录的这些关键点生成的，而xFaceBuilder?管线就可以将建模，动捕打包成一套流程，这样可以大大缩短数字人制作的周期，数字航天员小诤便是通过这些生产管线上“诞生”的，实现了超写实数字人的制作。
从流程上来说，小诤也是通过扫描、建模、贴图、绑定等环节产生的，但是在每个环节的技术和投入上做到了一个新的高度。首先是扫描， NExT技术团队利用自建的Photogrammetry Lab对参考模特进行完整的表情扫描，然后通过xFaceBuilder?的高质量人脸制作管线制作。我们放到可以清晰