"Hadoop集群监控与Hive高可用"分享总结

概述:

此分享是关于Hadoop集群监控与Hive高可用的分享汇总,作者来自暴风影音

汇总点:

Hadoop监控基于Cacti主要包括:IO,CPU,内存,IO等待缺点是模板太少
Hadoop监控基于Ganglia包括负载、带宽等缺点是配置复杂 
Hive的高可用可以基于HAProxy和多个Hive Thrift Server
HAProxy解决优化了TCP超时、Hive健康检查日志文件太多、轮询优化
基于phpHiveAdmin进行页面展示

拓扑图:



 

更多分享参见附件

猜你喜欢

转载自snv.iteye.com/blog/1946435