使用 JMX HTTP API,并发采集 HDFS 和 YARN 各节点的指标数据,用 grafana 展示。
地址: https://github.com/opsnull/hadoop_jmx_exporter
效果如下:
1
wpf375516041851 2020-05-07 10:42:23 +08:00
最重要的 rpc 监控,锁监控加上啊
|
2
hakim 2020-05-07 12:09:35 +08:00 via iPhone
表格挺好看的!
|
3
geekard OP @wpf375516041851
有的,截图只是一部分。GC 、Queue 、Locker 、RPC 的 qps 、latency 都有的。 |
4
wpf375516041851 2020-05-08 11:16:26 +08:00
@geekard
开源业界缺少一套类似 dataworks 的基础数据平台,监控这块可以整合到自动化运维平台中去,目前 jmx_exporter 可以少花些力气,大部分公司都有自己的一套,如果能搞出通用的大数据自动化运维平台,我觉得市场面会广些 |