性能优安全性高,通付盾打造风险监测预警平台推动风控服务升级( 三 )

相较于传统静态数据,技术人员利用数据挖掘和OLAP分析工具从静态数据中找到对企业有价值的信息,流数据的处理对应不同的计算模式:实时计算。

实时计算一般针对海量数据进行的,一般要求为秒级,而通付盾大数据安全团队目前所采用的流计算引擎,针对海量数据的实时计算能力已经达到毫秒级,关键技术在于引擎的流计算能力:

(1) 与批量计算那样慢慢积累数据不同,流式计算将大量数据平摊到每个时间点上,连续地进行小批量的进行传输,数据持续流动,计算完之后就丢弃。

(2) 批量计算是维护一张表,对表进行实施各种计算逻辑。流式计算相反,必须先定义好计算逻辑,提交到流失计算系统,这个计算作业逻辑在整个运行期间是不可更改的。

(3) 计算结果上,批量计算对全部数据进行计算后传输结果,流式计算每次小批量计算后,结果可以立刻投递到在线系统,做到实时化展现。

正式如此,与传统采用关系型数据库采集金融大数据的方式进行风险预警相比,采用流计算技术的通付盾智能风控预警平台具备以下几大优点:

推荐阅读