概述:
此分享是关于Hadoop集群监控与Hive高可用的分享汇总,作者来自暴风影音
汇总点:
Hadoop监控基于Cacti主要包括:IO,CPU,内存,IO等待缺点是模板太少 Hadoop监控基于Ganglia包括负载、带宽等缺点是配置复杂 Hive的高可用可以基于HAProxy和多个Hive Thrift Server HAProxy解决优化了TCP超时、Hive健康检查日志文件太多、轮询优化 基于phpHiveAdmin进行页面展示
拓扑图:
更多分享参见附件
概述:
此分享是关于Hadoop集群监控与Hive高可用的分享汇总,作者来自暴风影音
汇总点:
Hadoop监控基于Cacti主要包括:IO,CPU,内存,IO等待缺点是模板太少 Hadoop监控基于Ganglia包括负载、带宽等缺点是配置复杂 Hive的高可用可以基于HAProxy和多个Hive Thrift Server HAProxy解决优化了TCP超时、Hive健康检查日志文件太多、轮询优化 基于phpHiveAdmin进行页面展示
拓扑图:
更多分享参见附件