北京
凌晨兩點，告警系統(tǒng)安靜得反常。運維工程師盯著屏幕——Cilium的指標全消失了，Prometheus像被蒙住了眼睛。
這不是第一次。云原生監(jiān)控的幽靈故障，總在深夜造訪。
問題出在服務(wù)發(fā)現(xiàn)的邊界。Cilium作為Kubernetes的CNI插件，用eBPF重構(gòu)了網(wǎng)絡(luò)觀測層。但當Prometheus去抓取指標時，兩個系統(tǒng)的"對話"出現(xiàn)了時差：Cilium的端點信息更新了，Prometheus的抓取目標卻還停在舊版本。
更深層的矛盾是架構(gòu)假設(shè)的沖突。Prometheus默認目標穩(wěn)定存在，而Cilium的端點隨Pod生滅高頻變動。當Pod在兩次抓取間隔內(nèi)銷毀，指標采集就撲了空。
修復方案并不復雜：縮短抓取間隔、啟用Cilium的Operator托管端點、或者改用Cilium Hubble的專用導出器。但真正的教訓是——在云原生世界，監(jiān)控系統(tǒng)的可靠性，取決于它對"短暫性"的適應(yīng)能力。
凌晨的故障從來不是偶然。它是架構(gòu)債務(wù)在壓力時刻的集中兌現(xiàn)。
特別聲明：以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布，本平臺僅提供信息存儲服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.
