首页 > 其他 > 详细

spark-submit(spark版本2.4.2)

时间:2019-04-28 15:00:02      阅读:249      评论:0      收藏:0      [点我收藏+]

spark-submit官方文档 :http://spark.apache.org/docs/latest/submitting-applications.html

Launching Applications with spark-submit

./bin/spark-submit   --class <main-class>   --master <master-url>   --deploy-mode <deploy-mode>   --conf <key>=<value>   ... # other options
  <application-jar>   [application-arguments]

such as
./bin/spark-submit \ 
  --name "My app" \ 
  --master local[4] \  
  --conf spark.eventLog.enabled=false \ 
  --conf "spark.executor.extraJavaOptions=-XX:+PrintGCDetails -XX:+PrintGCTimeStamps" \ 
  --conf spark.hadoop.abc.def=xyz \ 
  myApp.jar
 

spark-submit(spark版本2.4.2)

原文:https://www.cnblogs.com/jqbai/p/10783805.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!