我與金融科技的故事｜富國基金張誠—固運維基座之本，提智能分析之效

    【編者按】為深入貫徹落實黨的二十大精神，引導(dǎo)基金行業(yè)機構(gòu)踐行《證券期貨業(yè)科技發(fā)展“十四五”規(guī)劃》，共促基金行業(yè)數(shù)字化轉(zhuǎn)型，按照中國證監(jiān)會總體工作部署，于2022年11月開展“證券期貨業(yè)數(shù)字化轉(zhuǎn)型主題宣傳月”活動。通過開展“證券期貨業(yè)數(shù)字化轉(zhuǎn)型主題宣傳月”活動，搭建交流平臺，展現(xiàn)數(shù)字化轉(zhuǎn)型成果案例，激發(fā)金融科技創(chuàng)新活力，營造金融科技長效發(fā)展新生態(tài)。該篇為“證券期貨業(yè)數(shù)字化轉(zhuǎn)型主題宣傳月”《我與金融科技的故事》征文之三。

固運維基座之本，提智能分析之效

——富國基金 張誠

    加入富國基金八年，見證了運維保障組的監(jiān)控系統(tǒng)，從最初單一的Nagios監(jiān)控，到逐漸整合Zabbix、Splunk、Prometheus、Skywalking、APM等復(fù)合技術(shù)，在系統(tǒng)層面和應(yīng)用層面的監(jiān)控越來越完善。隨之而來的則是性能和容量監(jiān)控，它是運維的必經(jīng)之路，是向更高層發(fā)展的基礎(chǔ)。

    經(jīng)過幾年的探索研究，我們形成了以監(jiān)控為核心，數(shù)據(jù)為基礎(chǔ)，業(yè)務(wù)為導(dǎo)向的性能容量分析體系，建立了跑批類系統(tǒng)趨勢分析、波動預(yù)測模型，業(yè)務(wù)連續(xù)性關(guān)鍵節(jié)點監(jiān)控和實時交易接口性能監(jiān)控為核心的匯總機制。

    總結(jié)一下性能監(jiān)控的成長歷程，個人認為一個良好的運維性能監(jiān)控必須經(jīng)歷過如下幾點：

    1、系統(tǒng)的歸納整理能夠清晰的梳理出公司各類系統(tǒng)分級，從7*24業(yè)務(wù)流程圖中提煉出核心系統(tǒng)，關(guān)鍵任務(wù)節(jié)點。

    2、數(shù)據(jù)的長期采集“一切用數(shù)據(jù)說話”合理利用工具定時收集相關(guān)數(shù)據(jù)，如zabbix的監(jiān)控項作為收集器，收集跑批系統(tǒng)的記錄每日交易量、批量耗時（含明細步驟）、存儲空間統(tǒng)計；Splunk自定義指標儀表盤，監(jiān)控實時交易系統(tǒng)的日均筆數(shù)、峰值筆數(shù)、單筆耗時、PV/UV；在前一步的基礎(chǔ)上，自研關(guān)鍵任務(wù)看板，每日完成情況和時間點，并推送相關(guān)統(tǒng)計報表。

    3、定期、多維度評估找出核心系統(tǒng)的核心指標數(shù)據(jù)，如日平均處理量、平均處理速度、清算節(jié)點平均耗時、存儲預(yù)計消耗量、日均筆數(shù)、峰值筆數(shù)、單筆耗時、接口訪問量；評估任務(wù)及時率和重清算風(fēng)險。

    4、從統(tǒng)計中得出反饋連點成線，初步得出目前系統(tǒng)的性能容量狀態(tài);從慢接口促進優(yōu)化、從高峰提供壓測基準、從增長率預(yù)測壓力位;從異常指標進行問題分析;從平均完成時間反推業(yè)務(wù)流程的優(yōu)化。

    5、思考優(yōu)化方向當形成標準的數(shù)據(jù)采集、分析和展現(xiàn)體系之后，可以向其他應(yīng)用不斷去復(fù)制這套方案，遵循一致的數(shù)據(jù)標準，最后數(shù)據(jù)的采集、分析、展現(xiàn)和告警標準化完成?？梢栽谶\維的故障定位、服務(wù)優(yōu)化、架構(gòu)改進、運維規(guī)劃等各方面找到應(yīng)用場景，思考優(yōu)化方向。

    通過以上步驟，配合相關(guān)的系統(tǒng)搭建和深入使用，增加核心技術(shù)組件的深度分析能力，從更底層發(fā)現(xiàn)問題，在更多維度的故障快速發(fā)現(xiàn)和快速處置能力；通過監(jiān)控不斷的正反饋循環(huán)，推動研發(fā)和廠商對接口升級、遷移、優(yōu)化；提升生產(chǎn)運行的持續(xù)監(jiān)測、高可用、雙活、快速擴容能力；預(yù)測數(shù)據(jù)增長趨勢，提前進行性能壓測；跑批監(jiān)控、實時監(jiān)控、任務(wù)監(jiān)控繼續(xù)擴大范圍，相得益彰形成更全面的統(tǒng)一的性能評估，最后數(shù)據(jù)的采集、分析、展現(xiàn)和告警標準化完成。