清华教授温江涛:后摩尔时代的视觉感知应回归能耗( 四 )

而在下一代 “视觉感知” 技术中 , 温江涛认为“会有这样一种新的阵列 , 它的耗能是非常低的 , 而且整体延迟率非常低 , 并且可以具有学习能力 , 可以进行不断的自我演进 , 这是后摩尔定律和登纳德缩放效应时代视觉处理的必由之路 。 ”

图 | VPU 直接利用光子的数据 , 低功耗低延迟实现追踪等基础视觉任务(来源:温江涛)

他把这类视觉处理器架构称为 VPU , VPU(Visual Perception Unit , 视觉感知单元)可以以极低的功耗和延时 , 更好地完成感知、追踪和识别等基本视觉任务 。

传统的效果是把光子信息通过光电转换和复杂的信号处理重建为一系列数据量巨大的高清晰度像素点阵序列信息 。 这些信息再通过通用或者专用处理器处理 , 中间涉及大量的无效计算和数据传输 , 并且为了完成数据传输 , 需要压缩、解压缩等复杂处理 。 而 VPU 可以直接感知光子 , 不需要通过视频序列的重建就可以直接完成视觉任务 , 从而在根本上实现现有体系无法达到的功耗、延时和处理性能 。

推荐阅读