新:弹性地图减少突破!任务节点的伸缩来了。

阅读时间:2分钟

最近我们发布了一个突破性的功能,允许AWS Elastic Beanstalk用户运行环境现场。现在,我们很高兴地宣布我们独特的自动定量弹性减少地图:EMR ClusterScaler。

EMR ClusterScaler使您能够利用一个弹性任务节点在你现有的EMR集群。它允许您定义目标,最小和最大能力任务节点,选择多个实例类型和大小,当然,监测规则规模上下EC2实例基于业务规则或负载。

它是如何工作的?

EMR ClusterScaler每EMR工作流定义。事实上,它使您能够添加1 . .N任务节点,从多个实例类型和允许您定义监测规则向上/向下扩展任务节点。

1 _emr-task-scaler

例如,您可以EMR ClusterScaler连接到一个现有的EMR集群运行1主节点,20 Core-Nodes, 5个任务节点。

  1. 选择你的目标EMR工作流Id
  2. 定义任务节点的数量,实例类型和大小task_scaler-compute
  3. 定义监测规则扩大和缩小
    1. 它可以是你的一个EMR RemainingMapTasksPerSlot等指标
    2. 每个实例可以度量,例如——CPU使用率、网络带宽等。

task_scaler-cloudwatch

一旦一切都配置,EMR ClusterScaler发射到你所需的数量的任务节点任务流Id.和规模将自动根据提供的指标。

ClusterScaler使一个有效的和复杂的使用在现货市场,通过推出现货实例尽可能降低集群成本,提高投资回报率。

Spotinst确保你的能力不会从你的用户设置最小值,通过使用在我们内部在现货市场预测算法。Spotinst尺度下资源时,天平首先从“高风险”点雷竞技rabet官网能力,从最可用的地方总是尺度槽在AWS。

所以,自动定量地图减少应用程序是在拐角处很久了。我们很高兴我们有机会帮助云客户能更有效率地使用他们的资源。雷竞技rabet官网

像往常一样,我们重视您的反馈!

今天试着EMR ClusterScaler。

Baidu
map