读书人

quot;Hadoop集群监控与Hive高可用quot;分享小结

发布时间: 2013-10-15 16:47:37 作者: rapoo

"Hadoop集群监控与Hive高可用"分享总结

概述:

此分享是关于Hadoop集群监控与Hive高可用的分享汇总,作者来自暴风影音

?

汇总点:

Hadoop监控基于Cacti主要包括:IO,CPU,内存,IO等待缺点是模板太少Hadoop监控基于Ganglia包括负载、带宽等缺点是配置复杂 Hive的高可用可以基于HAProxy和多个Hive Thrift ServerHAProxy解决优化了TCP超时、Hive健康检查日志文件太多、轮询优化基于phpHiveAdmin进行页面展示

?

拓扑图:



?

更多分享参见附件

读书人网 >行业软件

热点推荐