AI衣食住落地图鉴:灶台上炒菜、两天砌一栋房、还能看图织毛衣(14)

1、AI看图识别菜谱 , “皮卡丘”当成“煎蛋”

今年6月 , Facebook开源了一个AI识菜谱系统 。 该系统可以通过分析食物图片 , 判断图片中是什么食物 , 进而判断出食材和加工过程 。

▲Facebook的AI识菜谱系统页面

传统的AI识菜方法往往将识别过程简化为——从静态数据库中匹配的检索任务 。 这些系统在判断出图片中的食物之后 , 会去已有的数据库中匹配相应的或相似的菜品 。 这种方法极其依赖数据集的大小和多样性 , 很容易识别失败 。

Facebook换了一种新思路 , 将图像到配方问题公式化为条件生成问题 。 即:使用预先训练图像编码器和成分解码器 , 以图像及其相应的成分列表为条件生成指令序列 , 以此生产可能的菜谱 。

换句话说 , 就是在识别图片中的食材之后 , 该系统会预测成分列表 。 然后依据成分列表 , 推导菜品的加工方式 。

推荐阅读