shell自动部署spark(免密码+ssh+scala+spark)

一：目录安排 保存所有shell的文件目录：/tmp/config_shell 软件保存路劲:/home/dowload/ /home/dowload/jdk-7u79-linux-x64.tar.gz /home/dowload/scala-2.11.8.tgz /home/dowload/spark-2.0.0-bin-hadoop2.6.tgz 软件安装路劲:/home/ /home/jdk1.7 /home/scala2.11 /home/spark2.0 二：每个shell大楷的函数 /etc/profile文件的配置:/tmp/config_shell/config_etc_profile.sh jdk的解压与改名:/tmp/config_shell/config_jdk.sh scala的解压与改名:/tmp/config_shell/config_scala.sh spark的解压与改名:/tmp/config_shell/config_spark.sh 总的运行shell:/tmp/config_shell/run_config.sh 配置spark的配置文件（spark-env.sh,slaves）：/tmp/config_shell/config_spark_evn.sh 把主节点的所有安装配置发送到从节点：/tmp/config_shell/distribute_slaves.sh 运行顺序 1 jdk,scala,spark的解压，修改/etc/profile配置文件 运行/tmp/config_shell/run_config.sh 2 修改spark的配置文件，spark-env.sh与slaves /tmp/config_shell/config_spark_evn.sh 3 最后把jdk,scala,spark,/etc/profile分发到slaves bug:每台机子都要使用source /etc/profile,不然不能生效，或者每台机子重启一下哈