机器学习在领英的规模化应用( 四 )

Pro-ML中有两个工具贯穿刚刚提到的所有阶段:一个是Feature Marketplace , 另一个是Health Assurance Layer 。 在Feature Marketplace , 领英使用先进的技术来生成、共享和管理新特征 。 AI建模的核心是特征工程(Feature Engineering) , 领英有数百名工程师和数万种正在研究的特征 。 提高工程师生成、共享和管理特征的效率 , 对于提高他们的工作效率至关重要 。

而Health Assurance Layer可以在整个开发周期中持续监控模型状态 。 比如 , 它确保用于模型训练的离线特征和用于在线推理的在线特征在统计意义上一致或近似 , 同时确保在线模型的良好性能 。 比如在预测分数的时候 , 工程师希望在线打的分与离线训练的分数精度一致 。 一旦Health Assurance Layer检测到异常 , 会自动提醒工程师 , 然后工程师可以介入 , 进行调试 。 Health Assurance Layer还提供了很多有用的工具 , 帮助工程师进一步确认问题所在 。 是代码出错?还是数据缺失?还是仅仅因为模型老旧 , 需要重新训练?

Pro-ML提升效率的第一步——探索与授权

推荐阅读