Spark源码(三)——提交模式
发布日期:2021-11-18 17:47:12 浏览次数:10 分类:技术文章

本文共 239 字,大约阅读时间需要 1 分钟。

文章目录

三种提交模式

  1. spark内核架构,standalone模式,基于spark自身的master-worker集群
  2. 第二种,是基于yarn的yarn-cluster模式
  3. 第三种,是基于yarn的yarn-client模式
    如果要切换到第二种和第三种模式,很简单,将我们之前用于提交spark应用程序的spark-submit脚本,加上–master参数,设置为yarn-cluster,或yarn-client即可,如果没有设置,那么就是standalone模式;

流程图

在这里插入图片描述

转载地址:https://blog.csdn.net/weixin_37850264/article/details/111938830 如侵犯您的版权,请留言回复原文章的地址,我们会给您删除此文章,给您带来不便请您谅解!

上一篇:Spark源码(四)——sparkcontext
下一篇:Spark源码(二)——依赖剖析

发表评论

最新留言

留言是一种美德,欢迎回访!
[***.207.175.100]2024年04月26日 00时50分14秒