Spark-shell批量命令执行脚本的方法

Spark-shell批量命令执行脚本的方法批量命令执行脚本的方法

今天小编就为大家分享一篇Spark-shell批量命令执行脚本的方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小

编过来看看吧

批量执行批量执行spark-shell命令，并指定提交参数命令，并指定提交参数

#!/bin/bash

source /etc/profile

exec $SPARK_HOME/bin/spark-shell --queue tv --name spark-sql-test --executor-cores 8 --executor-memory 8g --num-executors 8 --conf spark.cleaner.ttl=240000 <<!EOF

import org.apache.spark.sql.SaveMode

以上这篇Spark-shell批量命令执行脚本的方法就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大家多多支持我们。