主流云平台介绍之—AWS(12)
EMR提供两种类型的集群:
1. 步骤运行集群
2. 长久运行集群
对于步骤运行集群 , 我们可以创建一个特定的集群 , 分配特定EC2来运行集群 , 给定一个集群创建成功后的运行步骤 。 那么在集群创建好之后 , EMR会自动运行我们提供的步骤 , 运行结束后 , 会自动关闭此集群 , 删除对应的EC2资源 。
比如:我们可以写一个Spark任务 , 从S3读取数据 , 并将结果存放到S3中 , 那么可以将这个任务提交给EMR步骤运行集群 , 那么其流程就是:
1. 预配置:比如勾选需要多少个EC2 , EC2是什么类型 , Spark任务在哪里
2. 预配置完成后 , EMR就会创建对应的EC2 , 然后在对应EC2上部署集群
3. 集群部署完成后 , 运行我们提交的Spark任务
4. Spark任务运行完成后 , EMR关闭集群 , 删除EC2
推荐阅读
- 尹正|尹正事业再攀高峰,联手斗鱼直播平台:“晋级”成为特种兵
- s6|金铲铲之战S6:值得改变阵容的海克斯强化介绍,让你如虎添翼
- 亲朋上分|《亲朋上分》266391亲朋下分亲朋上下分永劫无间崔三娘技能介绍 崔三娘如何获得更多技能
- 魔兽世界|《轨迹》新作明年发布! 法老控将针对NS平台开发游戏
- 月亮|原神骇浪派料理获取方法介绍和说明
- edg战队|EDG夺冠,观赛热度过亿,对比三大主流直播平台清晰度,虎牙赢了
- 杰斯·麦卡兰|LOL手游杰斯11月9日登陆国服,未来守护者杰斯技能介绍
- 直播平台|英雄联盟S11决赛观赛人数出炉,海外超400万人观看,历史第一!
- 盲盒|盟重冰雪单职业简答介绍
- 崩坏3|【欣然轻咨询G】第112期《崩坏3》今日正式登陆蒸汽平台《极限竞速:地平线5》即将发售