spark提交任务事例
程序员文章站
2024-02-25 10:40:53
...
spark-submit \
--class org.apache.spark.examples.SparkPi \
--master spark://xinhuo145:7077 \
--executor-memory 500m \
--total-executor-cores 1 \
/opt/ZDH/parcels/lib/spark/examples/jars/spark-examples_2.11-2.4.4-zdh9.8.1.jar \
100
其中注意要用有执行权限的用户 ,还有spark-examples_2.11-2.4.4-zdh9.8.1.jar版本号
执行结果: