讲一下 spark 的运行架构? Johngo学长 4个月前 Spark 42 Cluster Manager(Master):在standalone模式中即为Master主节点,控制整个集群,监控worker。在 YARN模式中为资源管理器 Worker节点:从节点,负责控制计算节点,启动Executor或者Driver。 Driver:运行Application 的main()函数 Executor:执行器:是为某个Application运行在worker node上的一个进程 回复 我来回复 暂无回复内容 请 登录 或者 注册 后回复。 相关问题 Spark 的各种 HA:master/worker/executor 的 HA? 4个月前 0 38 spark2.0 为什么放弃了 akka 而用 netty? 4个月前 0 45 RDD 常见问题集合 4个月前 0 56 spark的内存管理机制是什么样的? 4个月前 0 29 Spark 的 partitioner 都有哪些? 4个月前 0 67 分析一下一段 spark 代码中哪些部分在 Driver 端执行,哪些部分在Worker端执行? 3个月前 0 63 Spark on yarn 模式下的 Cluster 模式和 Client 模式有什么区别? 4个月前 0 33 Spark中的广播变量 4个月前 0 35 一个spark程序的执行流程是什么样的? 4个月前 0 84 讲一下spark的几种部署方式? 4个月前 0 45