清华教授温江涛：后摩尔时代的视觉感知应回归能耗( 五 )_“我们现在已经进入到了一个面向特定域

生物视觉的另外一个特征是大量不同类型的视觉细胞（比如人类就有两种）甚至复眼系统的信息融合，以达到更宽广的视野和更好的感知能力。 VPU 架构也需要把不同的信息融合在一起，还需要考虑兼容性、同步、异步、可靠性等等问题。这个融合可以在芯片内完成，也可以在芯片外完成，甚至可以通过摄像头阵列来实现。

因为大量的感知单元运行着一系列随机的任务，为了能更好地配置资源，必须要高效建模，然后实时动态地对数以万计的处理资源做优化的分配。这一核心技术也可以用在英特尔 CPU 这样的通用处理器上，实现诸如实时、低延时、高广播级超高清视频编码这样对计算资源和数据吞吐率有极高要求的应用。

温江涛的团队今年在世界上首次实现了广播级 8K+5G 的实时转播，在诸如男篮世界杯比赛，新华社国庆 70 周年庆祝活动 24 小时直播得到了应用。

同时，温江涛和团队也在和内容制作商探讨，把这项技术更好地运用在体育、音乐等领域。 “我们希望能够搭建起一个生态系统，更好地建立面向下一代的视频技术。 ”

清华教授温江涛：后摩尔时代的视觉感知应回归能耗( 五 )