首先,我对hadoop一无所知,只听过它的大名。
今天刚开始学习hadoop,我查阅了大量的资料。发现需要在linux环境下运行,对于新手来说,搭建环境是件很痛苦的事。所以我把我的搭建过程写下来,以供参考。
为搭建linux平台,我先下了VMware,然后下了centos7.0的镜像。hadoop集群搭建好像都需要四台主机。我暂时先搭建两个。以下是我参考的两篇文章
搭建无秘钥登陆
http://blog.csdn.net/anneqiqi/article/details/51174060
http://www.powerxing.com/install-hadoop-in-centos/
修改主机名
Vi /etc/hosts
解压压缩包
tar -zxvf xx
改变用户组
chown -R xx xx
Centos卸载jdk
http://blog.csdn.net/tralonzhang/article/details/7773824
Hadoop集群配置
https://www.cnblogs.com/ejiyuan/p/5557061.html
Netstat -anp|grep **
查看哪些端口被打开
netstat -tpnl
查看的端口开放情况