这是六年以来Kubernetes v1.0发布于2015年,从那以后就成为一个关键技术基础部署现代、云与速度,本机应用程序开发规模敏捷性和灵活性。fast-maturing生态系统,工具的进步成为可能一个新的海洋Apache Kubernetes上部署的应用程序的火花。有状态,大数据应用,一度被认为是与Kubernetes很难管理,正在迎头赶上,使用它作为一个一流的集群协调器。
随着越来越多的客户他们的大数据,毫升和人工智能应用程序到Kubernetes,现货NetApp兴奋地宣布启动dota2雷竞技规则 serverless容器引擎专门设计用于大数据的应用程序。
为什么海洋Apache火花呢?
虽然Kubernetes带来简单和容器和服务的标准化,它使底层的云基础设施具有挑战性的管理。甚至有经验的DevOps团队奋斗的手册,复杂和资源密集型任务扩展、配置和管理基础设施。这可以帮助公司实现Kubernetes和云计算的承诺,但把它错了会导致资源浪费,烧坏了团队,表现不佳的应用和高云账单。雷竞技rabet官网
Kubernetes对于大数据团队
对于大数据应用程序,同样的云基础设施存在,DevOps面临的挑战,但更高的障碍和陡峭的学习曲线数据工程师和科学家,他们经常Kubernetes本身的工作。即使管理服务像的EMR的帮助下,操作Kubernetes是很困难的。从最初的集群配置,设置自动定量、日常维护,学习如何做正确的一切和管理计算、存储和网络基础设施使这些团队变慢,让他们从驾驶数据计划。
日益增长的成本数据环境
据Gartner,到2022年公共云服务将是至关重要的,数据和分析创新的90%,到2025年,75%的企业将从驾驶转向实施AI,开车5 x增加流数据和分析基础设施。大数据持续增长速度,扩展云环境来支持它的成本也在增长。虽然云提供商提供的方法利用云计算与现货减少成本和保留的情况下,应用这些定价模型有效和可靠地控制成本可以采取一个巨大的努力,超过了大数据团队的能力和范围。
现货设计海洋Apache火花为应对这些挑战,给大数据应用程序自动化、可伸缩、可靠的云基础设施。与Apache火花,海洋数据团队获得更大的敏捷性和灵活性的大数据应用程序,他们可以专注于数据,而不是平台。用相同的核心技术力量海洋,现货serverless容器引擎,海洋Apache火花大数据的基础设施需求。
海洋Apache火花是什么?
作为数据向microservices社区行动更多,Apache火花,为大数据的开源框架,AI和ML应用,开始Kubernetes本地支持。与火花2.3,用户有一个Kubernetes部署工作负载调度器和管理他们的集群。Kubernetes和引发动机的日益普及点建立一个工具,它将改变大数据团队如何看待基础设施支持这些应用程序。
把serverless基础设施火花
海洋Apache火花是利用相同的核心功能海洋使用扩展基础设施部署在Kubernetes火花工作时。请求传入时,海洋为Apache火花将提供基础设施、智能地使用的混合,按需和保留的实例优化成本。
海洋Apache火花旋转Spark-aware基础设施与实例类型和大小相匹配的自动定量机制引发工作,基于容器的需求,从而使应用程序优化计算他们在规模需要运行。通过监测云资源利用率,实时和随着时间的推移,海洋为Apache火花为反复出现的火花不断曲调配置工作,优化基础设施性能和成本。随着时间的推移,这种自治系统改善您的云环境的可靠性和效率,使应用程序能够充分利用Kubernetes和云的力量。
针对大数据
一个大数据团队面临的最大挑战是不熟悉的云服务的工具,容器和Kubernetes。海洋为Apache火花很容易使用现有的工作流和插入JupyterHub预构建的集成,气流,火花历史服务器和spark-submit。用户可以配置本地Jupyter笔记本,在执行火花Kubernetes远程应用程序。从设置配置,资源配置和管理,海洋为Apache火花删除云基础设施的复杂性,所以数据工程师和科学家可以将精力集中于应用程序的构建和交付强大的数据。
引擎盖下面
集群管理和Kubernetes海洋Apache火花
Kubernetes之前准备好大数据部署,用户管理集群与内置的火花调度器,Apache Hadoop便或纱线。这些集群经理Kubernetes所取代,提供容器更高的效率,并使基础设施的统一管理。Kubernetes更易于有多个没有专用集群部署,与纱与火花。应用程序可以运行在相互隔离的利用相同的共享资源,和Kubernetes负责分配火花工作节点。雷竞技rabet官网
虽然Kubernetes带来更高的效率,更容易管理和应用程序的可伸缩性,Apache引发利益延伸至海洋底层基础设施在几种不同的方式全面管理数据平面的火花集群。
一旦结合你的环境,海洋为Apache火花负责设置部署所需的基础设施和规模引发执行人吊舱。海洋为Apache火花处理所有的配置,自动定量,管理和优化你的基础设施与这些核心特性和功能:
优化引擎
像海洋,海洋为Apache火花容器驱动方法的基础设施。利用先进的智能算法,海洋Apache火花的自动定量机制监视传入刺激就业的资源需求,并自动选择最好的基础设施来运行应用程序在最高性能。考虑到特定需求的工作负载,海洋为Apache火花匹配CPU、内存和其他资源实时预定的豆荚。雷竞技rabet官网
火花应用裁员
大数据的应用程序往往是资源密集型的,需要摄取大量的计算能力,流程,规范化和分析。然而,估计多少内存、CPU和其他资源的应用程序需要的不是一个简单的任务,特别是对于大数据团队没有经验来雷竞技rabet官网估计或计划为他们的应用程序的资源消耗。
海洋Apache火花的自动化的合理精简功能承担这责任远离团队和提供方法来提高资源配置的部署和工作。通过比较资源请求实际消费随着时间的推移,海洋为Apache火花不断避免节点获得音乐配置,防止利用不足和确保提供足够的资源。雷竞技rabet官网
火花执行人本包装
使用先进的算法,海洋为Apache火花自动高效地本包火花执行人的大多数现有的节点之前供应更多的实例。考虑很多就业机会具体考虑,海洋为Apache火花优化资源分配,确定多个容器应放置在同一个实例或分布在一群。
自动化的空间
是常见的大数据负载较低的时期,活动,紧随其后的是时候,他们需要快速的规模。重要的是基础设施匹配上运行的应用程序的可伸缩性,海洋和Apache火花的自动空间功能,用户保证其系统能够适应基础设施需求。海洋Apache火花保持默认的过剩产能快速规模额外的工作负载瞬间无需用户等提供额外的节点。
海洋开始使用Apache火花
Apache火花的海洋环境由Kubernetes集群与海洋Apache引发的所有组件安装。海洋Apache引发用户可以创建一个集群在命令行或轻松地导入现有的集群为Apache引发海洋。用户可以直接访问Apache引发海洋从现货控制台,和看到能力指标使用,成本分析和集群状态。
获得第一个看海洋Apache火花!
了解更多,请访问海洋为Apache火花页面或与我们联系安排一次演示看看海洋Apache火花能为你做大数据的应用程序。
