場景案例-應用監視與警報

1.1 使用者痛點

• 一個FR/BI叢集專案，在多台伺服器上分佈着各個節點，管理者需要監視每一個節點正常運作

• 一個FR/BI專案，不僅只有FR/BI組件，還有外接資料庫、負載轉發、狀態伺服器、檔案伺服器等組件，管理者需要監視每一個組件正常運作

• 除了確定以上伺服器、工程、組件的正常運作，管理者需要監視他們的配置是否正常，是否有異常現象

• 當出現異常之後，類似於負載異常或組件連結異常，管理者需要能即時收到相關通知資訊，而不是事後補救

• 為了分析這些異常，管理者需要登入到這些伺服器後台去拿對應的日誌，獲取很困難

1.2 解決思路

透過一個維運平台可以對接多個節點/應用，同時能夠監視多個環境，任意一個節點/應用出現問題都可以統一預警，也能夠透過維運平台方便的獲取到資訊。

1）監視專案正常運作：專案是否可用、節點是否正常、組件是否啟動

2）介面化查看專案配置：伺服器監視、應用監視、組件監視

3）專案出現異常時預警：企業微信預警、郵件預警、webhook預警

4）獲取日誌分析異常：支援線上查看日誌分析結果，支援下載日誌到本地自行分析

2.1 新增專案

管理者登入維運平台，點選「維運管理>專案管理」，可新增多個專案進行統一管理。

2.2 監視專案正常運作

1）監視專案正常運作

管理者登入維運平台，點選「維運管理>專案管理」，可見各個專案整體的狀態。

• 可用：該工程可用，至少有一個節點存活着

• 不可用：該工程完全不可用，每個節點都未存活

2）監視工程相關組件正常運作

管理者登入維運平台，點選「維運管理>專案管理>組件管理」，可見該專案中各個組件的狀態，支援快速啟停組件。

• running：該組件正常運作中

• exited：該組件未啟動，需要啟動後方可使用

2.3 介面化查看專案配置

1）展示伺服器具體資訊

在「監視與警報>伺服器監視」介面，監視帆軟應用及相關組件運作的伺服器的狀態，方便即時關注伺服器的各項指標情況，避免影回應用的正常運作。

2）展示應用具體資訊

在「監視與警報>應用監視」介面，展示帆軟應用的運作情況，可以針對單個節點的運作狀態的詳細資料進行查詢。

3）展示專案其他組件資訊

在「監視與警報>組件監視」介面，展示專案中各類組件的使用資訊。

包括：外接資料庫監視、Redis監視、Nginx監視、Elasticsearch監視、Minio組件

2.4 專案出現異常時預警

當應用出現高負載、當機風險、磁碟空間不足等情況時，需要即時通知管理者。

1）警報規則：維運平台內建了很多警報規則，基本無需使用者自行設定。

2）警報方式：在「監視與警報>警報管理>警報方式」中設定警報物件，支援「email、webhook、企業微信」三種方式。

3）傳送警報：配置的收件人信箱收到警報郵件

2.5 獲取日誌分析異常

為了分析異常時，管理者需要下載工程的日誌。

在「日誌管理」中，支援線上查看各個專案各個節點的日誌分析結果，支援下載日誌到本地自行分析。