1)Hadoop的启动(先启动zookeeper)
3台都得启动 zookeeper
/export/servers/zookeeper-3.4.9/bin/zkServer.sh start
/export/servers/zookeeper-3.4.9/bin/zkServer.sh status 查看状态
/export/servers/zookeeper-3.4.9/bin/zkServer.sh stop 关闭
在node01执行启动hadoop操作:
cd /export/servers/hadoop-2.7.5/
bin/hdfs namenode -format 此步只在初次启动时操作
sbin/start-dfs.sh
sbin/start-yarn.sh
上面2步合并为 sbin/start-all.sh
sbin/mr-jobhistory-daemon.sh start historyserver
2)node03开启mysql /etc/init.d/mysqld start
登录测试: mysql -uroot -p 123456
3)azkaban集群启动
1.先启动 exec-server
进入到azkaban-exec目录下执行2个命名
bin/start-exec.sh
curl -G "node03:$(<./executor.port)/executor?action=activate" && echo //手动激活 executor
2.启动 web-server
进入到azkaban-web目录下执行
bin/start-web.sh
https://node03:8443/index 默认用户名密码 azkaban
4)hive启动( 使用beeline连接hiveserver2)
方式1:进入到hive目录下启动
cd /export/servers/apache-hive-2.1.1-bin
启动元数据存储服务:
bin/hive --service metastore &
启动hiveserver2:
bin/hive --service hiveserver2 &
方式2:nohup命令启动(带 & 后台启动,nohup深度后台启动)
nohup /export/servers/apache-hive-2.1.1-bin/bin/hive --service metastore &
nohup /export/servers/apache-hive-2.1.1-bin/bin/hive --service hiveserver2 > /dev/null 2>&1 &
可以把/dev/null 可以看作"黑洞". 它等价于一个只写文件. 所有写入它的内容都会永远丢失. 而尝试从它那儿读取内容则什么也读不到.
/dev/null 2>&1则表示吧标准输出和错误输出都放到这个“黑洞”，表示什么也不输出。
//使用beeline连接hiveserver2:
cd /export/servers/apache-hive-2.1.1-bin
bin/beeline
beeline> !connect jdbc:hive2://node03:10000
方式2:expect beenline.exp 免密进入
set hive.exec.mode.local.auto=true;
开启本地模式,可提升非大量数据的运算速度
5)impala集群启动
!必须先保证hive开启
主节点node03启动以下三个服务进程
service impala-state-store start
service impala-catalog start
service impala-server start
从节点启动node01与node02启动impala-server
service impala-server start
查看impala进程是否存在
ps -ef | grep impala
浏览器页面访问：
访问impalad的管理界面
访问statestored的管理界面
测试:
在node03机的任意目录
输入: impala-shell
6)oozie启动:
cd /export/servers/oozie-4.1.0-cdh5.14.0
关闭oozie服务
bin/oozied.sh stop
启动oozie服务
bin/oozied.sh start
浏览器页面访问：
7)hue启动:
cd /export/servers/hue-3.9.0-cdh5.14.0/
build/env/bin/supervisor
登录页面: http://node03:8888
8)kafka启动:
3台都得执行
cd /export/servers/kafka-0.10
bin/kafka-server-start.sh -daemon config/server.properties
关闭命令:
bin/kafka-server-stop.sh stop
进入zk安装目录下:bin/zkCli.sh 进入zk客户端
ls /consumers ls /brokers/topics
eagle监控页面:
8)hbase启动:
cd /export/servers/hbase-2.0.0
从哪台虚拟机开启就写哪台就是HMaster
启动命令:
方式1: 群启动
bin/start-hbase.sh
方式2: 单个启动
bin/hbase-daemon.sh start master //启动master
bin/hbase-daemon.sh start regionserver //逐台启动regionserver
浏览器页面访问:从哪台虚拟机开启就写哪台的地址