本人使用的环境是虚拟机VMware centos7.2
1,下载hadoop :hadoop-2.6.0-cdh5.9.3.tar.gz
为了统一大数据各个软件由于版本不同出现的问题,使用了相应的下载地址
https://archive.cloudera.com/cdh5/cdh/5/
2, SSH设置和密钥生成
SSH设置需要在集群上做不同的操作,如启动,停止,分布式守护shell操作。认证不同的Hadoop用户,需要一种用于Hadoop用户提供的公钥/私钥对,并用不同的用户共享。
下面的命令用于生成使用SSH键值对。复制公钥形成 id_rsa.pub 到authorized_keys 文件中,并提供拥有者具有authorized_keys文件的读写权限。
$ ssh-keygen -t rsa $ cat /root/.ssh/id_rsa.pub >> /root/.ssh/authorized_keys $ chmod 0600 /root/.ssh/authorized_keys
3,安装hadoop
安装的步骤参考的网址:
https://www.yiibai.com/hadoop/how_to_install_hadoop.html