记录几个 Spark 概念

记录几个 Spark 概念

软件工具 2年前 (2022-06-26) 浏览: 69 评论: 0

Application:用户构建在 Spark 上的程序,由集群上的一个 Driver 程序和多个 Executor 组成。 Driver Program:该进程运行应用的 main() 方法并且创建了 SparkContext。 Cluster Manager:一个外部的用于获取集群上资源的服务,如 Standlone Manager, Mesos, YARN。 Worker Node:任何在集群中可以运行应用代码的节点。 Executor:一个为了在 Worker 节点上的应用而启动的进程,


切换注册

登录

忘记密码 ?

切换登录

注册

扫一扫二维码分享