Linux 中 hadoop 安装及配置详解
安装前提:
1.ssh 软件安装
2.ssh 免密设置成功
3.Jdk1.7 以上版本安装
4.Path 设置,将 jdk 的 bin 目录设置到 path 中
5.Hadoop 软件下载并解压。
6.对 Hadoop 文件解压文件夹下的 hadoop-2.7.3/etc/hadoop 目录下的 hadoop-env.sh 、
core-site.xml、hadfs-site.xml、mapred-site.xml、yarn-site.xml 文件进行修改。
7.配置 Hadoop 环境变量
8.运行 Hadoop
9.运行 Hadoop 实例
SSH 免密设置
(一)先确定当前系统 ssh 指令是否可执行,具体过程为:
在控制台中敲击出 ssh,然后连续按两次 tab 键,如果安装 ssh 软件,即可以在控制台中观
察到如下提示:
如果未安装 ssh 软件,自行百度安装教程,此处不赘述。
(二)继续在控制台中敲击 ssh-keygen -t rsa (注意空格)
连续 enter 键,直到出现以#号出现的控制行。
(三)通过命令 ls -al ~/.ssh 查看 ssh 文件夹下的内容:
可发现文件 id_rsa 以及 id_rsa.pub。如果未发现,请重试上述操作,或者自行百度原因。
(四)使用命令 cat ~/.ssh/id_rsa.pub > ~/.ssh/authorized_keys 将 id_rsa.pub
文件的内容写入 authorized_keys 中,此时 ssh 免密设置已完成。