【kafka可視化監控與告警系統】
Kafka可視化監控與告警系統,項目基于一些開源kafka監控軟體做的二次開發。
此平台可以介入多個不同版本的kafka叢集進行監控
項目背景
在實時資料進行中,經常遇到資料延遲問題,對kafka資料堆積量的監控能很及時地知道哪個節點資料處理能力不足,及時發現并解決線上問題。
目前版本的項目依賴開源軟體kafkaOffsetMonitor,原因:kafka不同版本的擷取監控資料資訊的方式有所不同。基于kafkaOffsetMonitor可以避免不同版本的相容性問題。kafkaOffsetMonitor易于安裝,受用人群比較普遍,另外一個開源工具KafkaMonitor增加了對kafka0.9+版本的資料讀取支援。但是沒有資料報警,資料堆積問題不能及時發現,筆者直接就在此基礎上進行了二次開發。
項目支援監控多個kafkaOffsetMonitor
特别說明
kafka 0.9及以下版本需要安裝kafkaOffsetMonitor
kafka 0.9以上版本需要安裝KafkaMonitor
位址:網頁連結
系統部分截圖: