统一观测丨使用 Prometheus 监控 E-MapReduce,我们该关注哪些指标?
原文中文,约26900字,阅读约需64分钟。
📝
内容提要
阿里云Prometheus对EMR平台大数据服务的监控实践,包括HOST、HDFS、YARN、Hive、Kafka、Zookeeper、ClickHouse和Flink等指标的采集和解读,其中Zookeeper指标包括包数量、延迟、watch数量、znode数量、连接数量、数据大小等,Kafka指标包括消息队列、Broker状态、吞吐量、性能、存储、请求率、请求时间、消息转换、ZK会话、JVM等,Impala指标包括状态、吞吐量、请求率、消息转换、存储等。
🏷️