【工经之声】大数据技术及其行业应用：基于铁路领域的概念框架研究(14)_：【工经之声】大数据技术及其行业应用

（三）铁路大数据处理流程

铁路是一个庞大的体系，针对各个领域的数据采集、处理、分析等都有相应研究，如：通过CMD系统对机车数据的采集与处理，通过6A系统对机车安全数据的采集与处理，通过TMIS系统对铁路运输管理数据的采集与处理，通过12306系统针对客运数据的采集与处理，通过95306平台针对货运数据的采集与处理等。随着信息技术的发展，铁路数据采集的频率、精度不断提高，基于各种数据融合的数据分析方法越来越多。然而，如果从大数据流程的角度来考虑，大部分研究仅仅侧重于数据流程的几个环节，还很难有能够全部覆盖整个链条的应用。通过对比其他领域的相关研究，铁路大数据流程应该包括铁路数据的采集、预处理、管理、处理、分析等，不同阶段的支撑有所不同。在数据采集阶段，主要是各种硬件设备（传感器、应答器、摄像仪等）对数据的采集和信息系统的数据交换；在数据预处理阶段，主要是数据筛选、数据清洗、数据整理、数据标准化等工作，通过制定标准或设计算法能解决大部分的问题；在数据管理阶段，更多的是依托于现有的一些大数据软件、系统等；在数据处理阶段，针对具体的应用场景需要不同的处理平台或技术支撑，比如分布式处理等；数据分析阶段是与应用或需求息息相关的，通过设计不同的模型可以获得不同的分析结果。