飞天大数据计算平台:一个十年前就启动的核心技术长征( 三 )

2009年这项关于大数据的技术长征开始。王坚带队,目标是自研大数据计算平台——飞天。

事实证明,阿里做了正确的选择。

四年攻坚,MaxCompute终于取得重大突破:2013年8月15日,阿里云历史性地突破了同一个集群内5000台服务器同时计算的局限,为未来的大规模服务奠定基础。十年后,单集群规模已超过1万台,能做到这一能力的科技公司在全球都寥寥可数。

在杭州云栖小镇竖立着一尊飞天5K的纪念碑,碑上刻着参与解决这一技术难题的技术人员名字。

解决世界级算力难题

通过大数据计算平台,可以让订单实时准确汇聚,也可以精准预测变幻莫测的天气变化,各行各业都在大规模使用大数据来提供更好的服务,而实现这一能力就是海量数据分析的结果。

但要处理好这些数据并不容易。除了数据量的剧增,不同行业数据类型丰富多样,如结构化数据、非结构化数据等,都给大数据计算平台带来新的挑战。

基于这套创新技术,2015、2016年,阿里云刷新世界计算奥运会之称的SortBenchmark世界纪录;2017年,完成全球首次基于公共云的100TB BigBench大数据基准测试。

推荐阅读