通用banner
您当前的位置 :首页 > 新闻资讯 > m6米乐官网

spark 布置形式是什么

2023-10-16 02:07:55 m6米乐官网

  这篇文章首要解说了“spark 布置形式是什么”,文中的解说内容简略明晰,易于学习与了解,下面请咱们跟着小编的思路渐渐深化,一起来研讨和学习“spark 布置形式是什么”吧!

  standalone形式合适运用在数据规划不大,集群所布置大数据核算结构单一,整个集群核算资源能够悉数提供给spark核算,无需考虑资源分配的问题

  spark on yarn在国内运用较为广泛。 它具有以下优势:1. 防止建立spark集群。spark只需要布置在一个节点上,通过该节点,将使用提交给yarn集群处理。在具有yarn集群的情况下,无需建立spark集群就能够便利的运转spark使用 2. 一致资源办理和调度。yarn是包含mr, spark在内的多种大数据核算引擎的资源办理和调度的完成方法,yarn具有资源阻隔机制,使得各种大数据核算使命能够安稳的运转在集群中,而不可能会发生资源竞赛问题。3. 资源弹性办理。yarn通过行列的方法,依据不一样使用程序的资源压力,弹性调度资源的运用量

  感谢各位的阅览,以上便是“spark 布置形式是什么”的内容了,通过本文的学习后,信任咱们咱们对spark 布置形式是什么这一问题有了更深入的领会,详细运用情况还需要咱们实践验证。这里是亿速云,小编将为咱们推送更多相关知识点的文章,欢迎重视!