首发于 spark

Spark-Submit 源码剖析

直奔主题吧:

常规Spark提交任务脚本如下:

其中几个关键的参数:

--class
--properties
--driver-java-options
--jars
--files
jar包

再看下cluster.conf配置参数,如下:

spark.local.dir
spark.master