欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页

spark提交任务事例

程序员文章站 2024-02-25 10:40:53
...
spark-submit \
 --class org.apache.spark.examples.SparkPi \
 --master spark://xinhuo145:7077 \
 --executor-memory 500m \
 --total-executor-cores 1 \
 /opt/ZDH/parcels/lib/spark/examples/jars/spark-examples_2.11-2.4.4-zdh9.8.1.jar \
 100

其中注意要用有执行权限的用户 ,还有spark-examples_2.11-2.4.4-zdh9.8.1.jar版本号

spark提交任务事例

执行结果:

spark提交任务事例

相关标签: spark&sparkSql