EMR工作量与Elastigroup连续性

亚马逊的弹性减少或EMR地图,使它容易设置,操作和规模大数据环境。这使得数据科学家和开发人员快速分析大量的结构化和非结构化数据。结合现货NetApp的ElastigroupEMR),数据科学家可以可靠地运行核心节点和任务在高度可负担得起的EC2实例。

消除单点故障

EMR的普及和广泛应用是由于其强大的并行处理数据集分布和处理跨多个计算节点。所有这些数据处理分布以及集群健康检查,执行EMR主节点。

然而,如果主节点失败,所有数据处理停止,和集群自动终止。

为了避免这种情况,Elastigroup现在支持定义一个EMR集群中的多个主节点。这将确保在主要主节点故障的情况下,它会自动故障转移到备用主节点而不影响数据处理。

注意:这是目前可用的EMR 5.23.0和更高版本。

开始使用EMR多个主节点

使用现货NetApp的API需要配置以下值:

• 主群值应该设置为目标3(这是目前支持价值AWS)
• 必须ON_DEMAND主群生命周期
• 我们建议改变terminationprotection值是false,否则你将无法使用Elastigroup终止集群。