Unified Monitoring: Which Metrics Should We Focus on When Using Prometheus to Monitor E-MapReduce?
原文英文,约1300词,阅读约需5分钟。发表于: 。E-MapReduce指标观测主要包括HOST监控、HDFS 、YARN、Hive、Kafka、Zookeeper、ClickHouse和Flink等,那么接下来我们将进行逐一解读。
阿里云Prometheus对EMR平台大数据服务的监控实践,包括HOST、HDFS、YARN、Hive、Kafka、Zookeeper、ClickHouse和Flink等指标的采集和解读,其中Zookeeper指标包括包数量、延迟、watch数量、znode数量、连接数量、数据大小等,Kafka指标包括消息队列、Broker状态、吞吐量、性能、存储、请求率、请求时间、消息转换、ZK会话、JVM等,Impala指标包括状态、吞吐量、请求率、消息转换、存储等。