数字人科技突破,未来发展难以估量


 数字人科技突破,未来发展难以估量
文章图片

 数字人科技突破,未来发展难以估量
文章图片

数字人是什么?相信很多人面对这个问题的时候都是一脸懵逼 , 什么是数字人?虚拟人物吗?初音未来洛天依那样的虚拟歌姬?
其实这些都不是 , 如果是关注新华社比较多的读者 , 那应该就知道一个人 , 那就是新华社的第一位数字记者小诤 , 作为一个超写实的数字人 , 小诤究竟是怎么做到能够如此的真实的呢 , 相信各位都想知道 , 而就在近日新华社向我们公布了数字人小诤背后技术相关的视频 , 让我们重新认识了这位数字记者 。
不过在认识小诤之前 , 还要介绍一下另外两位数字人 , 那就是Siren(塞壬)和Matt , 和大众经常能看到的二次元虚拟偶像不同的是 , 数字人在外形上更侧重于真实以及在智能方面的研发 , 这也就让数字人的诞生充满了困难 。
数字人的诞生
【|数字人科技突破,未来发展难以估量】NExT Studios工作室在筹备Siren(塞壬)的时候 , 就在还原人类的面部表情上遇到了巨大的困难 , 要知道想要做出足以以假乱真的虚拟人 , 不仅要制作出一个像人的模型 , 更重要的还有需要寻找合适的模特进行扫描、动作捕捉 , 这里面哪怕有一小步出错 , 都有可能会造成“恐怖谷”效应 。
就是为此 , NExT Studios工作室尝试了各种各样的办法去解决这个问题 , 例如使用3D打印方法做出的模特假头 , 又或者是增加摄像头捕捉模特更细致的面部表情变化 , 在这些办法一一尝试改进后 , 最终Siren(塞壬)还是在通过真人动作捕捉 , 经过了编码及视频传输等一系列工作后诞生 , 代表了中国在数字人技术领域上的一项大突破 。
随后的Matt , 更是在Siren(塞壬)的基础上更加接近人类 , 能够表达出喜怒哀乐 , 并且为了训练语音驱动模型 , NExT Studios工作室为其准备了长约20个小时、13339条语句 , 在这其中包含语音、面部运动和身体运动的多模态训练数据集 , 除了能以情绪带动面部表情外还能驱动他的身体运动 。
数字人技术的突破
在这之后 , 便是小铮的诞生 , 她是数字人技术突破的代表 , 几乎克服了前者的所有缺陷 , 为了让小诤的动作显得更自然不显得僵硬 , 制作人员采用了顶级的动捕方案 , 并应用了Vicon光学动作捕捉系统 , 使用高达1600万像素的超高精度捕捉以及每秒120帧的超高捕捉帧率让小铮在面部表现和身体的流畅度上可谓是及其还原人类 , 作为新华社和NExT Studios联合打造的首位数字记者 , 她是专门为了报道航天主题和场景而研发 , 肩负了现场报道航天载人、行星探测等国家重大航天项目的任务
就现在数字人的发展而言 , 我们或许真的能够放开脑洞大肆幻想一番 , 或许在不久后的未来数字人就能真正拥有实体 , 能够代替人类前往一些较为危险的地方完成工作 , 这或许就是数字人所要发展成的模样 。

    推荐阅读