犀牛娱乐原创
【定义|从Epic Games到影谱科技，以AI定义视听行业未来】文｜胖部 编辑｜夏添
在各种关于未来的想象里 ， 人工智能（AI）始终是最重要的意象之一 。 《生化危机》里“红后” ， 《她》里让男主角为之疯狂的“萨曼莎”OS1 ， 《钢铁侠》最可信任的智能管家贾维斯 ， 人类只需对他们开口 ， 就能完成最复杂的工作 。
这样的梦想正在接近现实 ， 尤其是在娱乐视听行业 。
此前北美投资人Matthew Ball在分析科技巨头Epic Games时 ， 将其虚幻引擎技术单独拿出来介绍 ， 认为这部分技术正在支撑起公司未来的想象力 。
所谓虚幻引擎 ， 是Epic Games开发的一款第三方引擎 ， 简单来说就是一个全能广泛的套装软件 ， 它可以让用户发挥自己的想象力 ， 创造虚拟数字体验 。 过去需要一个资深工程团队花几年设计底层代码的项目 ， 现在团队只需要专注于创意即可 ， 复杂的编程交给虚幻引擎做自动化生成 。
文章图片
“虚幻引擎的最终目标是使内容制作者们更有效率 ， 让一个预算很少的几人团队有可能打造出跨时代的高质量游戏 。 ”Epic Games的创始人、CEO Tim Sweeney这样介绍这个技术平台 。
发力自动化生成内容的不只是游戏行业 。 迪士尼开发了一个系统,可以从自然语言故事中提取信息 ， 初步自动生成简单动画 ， 通过VR影像提供“亲临”影片故事场景的体验 ， 这项技术将应用在电影的创作和拍摄中 。
而在中国 ， 影谱科技（Moviebook）实现影像内容生产制作的Motion Capture from Video System（从视频中捕获动作 ， MCVS）框架 ， 让机器直接模仿大量已存视频片段来学习 ， 允许数据为驱动的模仿以生成视频内容 。 这方面的技术研究 ， 让中国在未来的影像自动化领域取得了先发优势 。
未来式视听体验：
当下应用与想象空间
在游戏行业 ， 虚幻引擎常被认为最适用于开发视觉效果丰富的游戏 。
相比于更加灵活、适用于开发手游的Unity ， 虚幻引擎所带来的极致的图形保真度或顶尖的物理体感 ， 吸引了许多头部游戏的发行商 。 例如任天堂2019年的Switch游戏《Yoshi's Crafted World》使用了虚幻引擎 ， Square Enix 的《王国之心3》和《最终幻想7》重制版也是如此 。
文章图片
尤其是对新工作室来说 ， 从零开始制作专有引擎 ， 同时还要打造新的热门游戏 ， 成为进入这个行业天然的门槛 。 “现在建立一个引擎的成本是数亿美元 ， 代表了数百人多年的工作 。 你不能再建造一个只适合一种类型游戏的引擎 ， 这在经济角度上是行不通的 。 ”Tim Sweeney表示 。 虚幻引擎为他们打开了进入行业的大门 。
当以虚幻引擎为代表的自动化生成系统快速发展 ， 其应用空间正延伸到游戏行业之外 。 实现所谓“实时虚拟生产”的游戏引擎成为动画和实景视频结合的未来 ， 比如迪士尼2019年的爆款《曼达洛人》几乎是基于虚幻引擎拍摄的 。
《曼达洛人》的全部场景 ， 从冰雪世界 ， 到纳瓦罗沙漠星球和索贡森林 ， 几乎都是在加州曼哈顿海滩的一个虚拟舞台上拍摄的 。 虚幻引擎让导演只需要一半的预算 ， 就实现了电影级的视觉效果和两倍以上的时间优化 ， 而且非常灵活 ， 导演乔恩-法夫罗可以完美地控制每个镜头的元素 ， 哪怕一朵云的走向 。
文章图片
这让疫情期间的迪士尼避免了拍摄场地和人数的限制 。 而对于整个影视工业来说 ， 这样的虚拟生产内容的技术正在打开更多可能性 ， 比如由于《曼达洛人》中的虚构世界是运用虚幻引擎构建的 ， 其场景和人物可以更容易地过渡到视频游戏或VR体验中 。
国内类似的技术并不落后 ， 影谱科技就是典型代表企业 。 有消息称 ， 影谱科技也参与了Epic Games的投资 。
文章图片
对比影谱科技的MCVS相关产品和虚幻引擎 ， 不同点首先在于应用场景 ， 后者聚焦于游戏 ， 影谱科技主要发力影像自动化生产 ， 同时Epic Games不仅仅是提供服务的技术平台 ， 还作为游戏发行商产出了《堡垒之夜》《绝地求生》等游戏 。 但在技术领域的引领意义上 ， 双方都在尝试以自动化技术将生产者从繁琐的技术领域解放出来 ， 打开行业内容生产的想象空间 。
在视听行业的未来 ， 影谱科技的价值或许在于从技术层面上提供了一个入口 ， 让国内的从业者在技术引导的下一个内容时代取得先发优势 。
AGC内容将登场
影谱科技的数字化应用场景
在2021年 ， 各大平台还在构建以UGC和PGC为主的内容生态 。 但或许五年后 ， AGC内容将成为内容领域的关键玩家 。
所谓AGC就是“Automatic Generated Content”（智能生产内容） ， 最突出优势在于提升生产效率、降低生产成本 ， 并进一步革新生产方式 。
影谱科技的AGC智能影像自动生产解决方案称为MAGC ， 根据其公开的实践数据 ， 影谱科技AI生成引擎生成一段60s视频的总成本与传统方式相比降低79.8%以上 ， 而生产率最高可以提高百倍以上；检索一段60s视频内相似帧图像或特定图像 ， MAGC 2.0所需总成本与人工相比降低99.73% ， 而错误率降低10倍以上 。
同时 ， 结合虚幻引擎打造《曼达洛人》的例子可以看到 ， AGC内容生产在很大程度上降低了生产难度 ， 进一步打开了内容创作的可能性 。
文章图片
当娱乐视听行业遇上AI影像自动化生产技术 ， 这天然成为一次行业生产力解放的迭代 ， 通过重新构想人与机器交互的方式 ， 人工智能作为工作者、内容创建者和消费者 ， 为产业数字化转型升级和商业创新方面带来重要支撑 。
技术的升级还在带来更多可能性 。 去年底 ， 影谱科技推出了基于人工智能技术的数字孪生引擎MADT（Moviebook Auto Digital Twin） ， 所谓数字孪生（Digital Twin） ， 表示是在虚拟空间中完成现实物体的超现实映射 ， 从而反映相对应的实体装备的全生命周期过程 。
这是继其智能影像生成引擎MAGC之后又一AI生成引擎 ， 是国内首款融合AI+5G的3D数字孪生引擎 。 基于基础设施升级提供的迭代服务 ， 让影谱科技的数字孪生技术应用场景更加普遍 。
比如MADT打造的数字孪生课堂 ， 让学生和老师可以远程使用交互式虚拟环境 ， 这让疫情期间的师生们可以获得一个更真实的“课堂” 。 又如新零售产业 ， 零售商使用MADT来升级其在线零售店铺及商品管理 ， 让更多的客户获得与线下一致的互动购物体验 。
文章图片
而对于娱乐视听行业而言 ， MADT的技术升级与更多应用场景也提供了全新的增长机遇 。 长期以来数字孪生技术主要应用于游戏娱乐和电影工业 ， 比如影视特效、3D游戏等 ， 但随着产业数字化进程的加速 ， 数字孪生技术的内容主体正在向产业广泛的商业应用迈进 ， 而这些内容或可通过技术的底层逻辑共通 ， 与娱乐内容实现更多的联动可能性 。
AI自动化成新蓝海
搭建行业未来的基础设施
去年12月 ， 广电总局印发了《广播电视技术迭代实施方案（2020-2022年）》 ， 明确在媒体领域推进融合媒体内容生产便捷化和智慧化 ， 提升媒体内容生产力和新闻报道的时效性 。 在具体措施方面 ， 特别提到了“推进人工智能技术在内容制作、智能剪辑等方面的应用”等 。
作为广电数字化升级的重要基础技术 ， “AI内容制作技术”首次被监管机构提至战略高度 。 这代表着行业政策端对AI自动化技术的肯定 。
这种肯定的基础首先在于技术是否稳定、安全、真正承载业务等应用性方面 ， 2020年年初 ， Garnet就发布了《2020人工智能技术成熟度曲线报告》 ， 指出AI生成的技术成熟度已符合商业化应用爆发的能力 。
文章图片
其次 ， 技术投入实践应用的表现 ， 也已经印证了其提升效率、降低成本、优化创作能力方面的优势 ， 并逐渐在AI内容制作、内容治理、内容商业化方面形成了全链条的良性循环 。
2020年芒果TV热播的综艺《乘风破浪的姐姐》中 ， 影谱科技作为其视觉技术独家合作伙伴 ， 通过AI影像自动生产引擎助力该节目的商业化触达 。 从效果来看 ， 非标视频素材生成只需要建立一个任务 ， 就能在数百剧集中完成一键植入内容 ， 并可以区分传统包装类、节目内曝光类、以及简单的情节交互类等不同类型 。
文章图片
另一个重要的应用领域就是虚拟数字人 ， 包括各大娱乐平台正在发力的虚拟偶像 ， 本质就是AI生成技术所创建的多模态影像 。 广电总局的《方案》中将“开展虚拟主播的规模应用”列为近期任务 ， 而影谱科技的AI生成技术被认为是创建、运营虚拟数字人的关键底层技术 。
或许在当下 ， 想象直接通过AI的自动化生成技术制作电影、剧集 ， 似乎还带有一些科幻性质 。 但在影谱科技 ， 其技术的开发和迭代 ， 已经在打开行业生产和商业化前景的可能性 ， 为行业的未来式打造基础设施和底层土壤 。 视听行业发展的未来 ， 这些先验性科技的价值或将在更多维度上获得指数级增长 。
推荐阅读
- 样儿|从太空看地球新年灯光秀啥样儿？快看！绝美风云卫星图来了
- the|美监督机构：从煤电厂捕获二氧化碳的计划浪费了联邦资金
- Pro|价格相差1000块钱 买小米12还是小米12 Pro？很多人选错了
- 最新消息|被骂“从未见过如此厚颜无耻之书” 中华书局回应称即日下架
- 趋势|[转]从“智能湖仓”升级看数据平台架构未来方向
- 刘思远|从1到100 这座“塔”不断创造中国航天奇迹
- 成功|从1到100 托举大国重器的“功勋塔架”
- 大叔|从治愈到共振，网易云音乐的刷屏套路升级了
- 大脑|从抗疫到治堵，AI成行业智能化“大底座”
- 画质|六款主流5G手机视频体验测评