大数据的未来在哪里？从“吃鸡”游戏开始说起( 四 )
2019年,知名的大数据软件企业Cloudera和Hortonworks宣布合并,而另一大数据独角兽MapR被HPE收购,标志着大数据商业软件时代的结束,也预示着大数据的另一个未来。
三.大数据的未来在哪里?
在过去的十几年,硬件的性能,尤其是网络性能一直是大数据应用的瓶颈, 天才的架构师们自然想到了集群化大数据系统架构。
1)分布式集群集中部署
单服务器提供的算力有限,使用大规模的服务器组成分布式集群,成千上万个普通CPU并行计算突破了单服务器算力极限。
2)数据分散存储在物理机每个硬盘上
每台服务器挂载几个至十几个普通硬盘,使用多台服务器搭载搭建了分布式存储系统,有效解决超大规模数据存储问题。
3)数据本地化
数据处理任务从远程物理机读取数据开销大。以数据为“中心”,将数据处理任务迁移到数据所在的物理机上,能有效降低网络带宽,保证了整体性能。
推荐阅读
- 捉迷藏|?LOL世界赛“含金量”数据出炉：EDG仅排第六，IG稳居榜首
- 移速|王者荣耀：移速的价值到底在哪里？1点移速代表着什么呢？
- edg战队|EDG夺冠，从孩子们对游戏的热爱，谈近视防控的未来！
- 原神|原神：2.3版本为岩系主场，未来新角色同样不少，水系单手剑绫人可期
- 碧蓝航线|碧蓝航线SR重巡福煦数据详解 期待越高失望越大 强度平平无奇
- 明日之后|明日之后“人尸大战”展现中国精神：人类的未来我们共同争取
- kramer|国服极地大乱斗数据上线，来看看胜率榜符合你的预期吗？
- RNG|与RNG合同未到期？小狗畅谈未来打算，还为IG队员加油打气
- 魔女斗篷|王者荣耀：魔女斗篷yyds？永夜守护到底差在哪里？
- 机战|沧海拾遗 钢魂不止：《机战》的下一个十年在哪里？