Spark部署模式与作业提交

阅读 23

2023-10-05

1.作业提交

1.1  spark-submit

Spark 所有模式均使用 `spark-submit` 命令提交作业,其格式如下:

./bin/spark-submit \
  --class <main-class> \        # 应用程序主入口类
  --master <master-url> \       # 集群的 Master Url
  --deploy-mode <deploy-mode> \ # 部署模式
  --conf <key>=<value> \        # 可选配置       
  ... # other options    
  <application-jar> \  

精彩评论(0)

0 0 举报