摘要:本文為大家講解中的框架。在系統(tǒng)中,中間件增強框架探針提供了應用畫像及性能數(shù)據(jù)收集等功能,其中數(shù)據(jù)收集功能主要采集四類數(shù)據(jù)實時數(shù)據(jù)畫像數(shù)據(jù)調用鏈接數(shù)據(jù)生成以及線程數(shù)據(jù)分析數(shù)據(jù)。提供服務,供后續(xù)抓取使用,其中服務注冊了三個,分別為。
本文為大家講解MOF中的CaptureFramework框架。該框架提供統(tǒng)一的數(shù)據(jù)抓取行為和生成抓取結果能力,實現(xiàn)實時數(shù)據(jù)采集。
背景應用服務監(jiān)控是智能運維系統(tǒng)的重要組成部分。在UAV系統(tǒng)中,中間件增強框架(MOF)探針提供了應用畫像及性能數(shù)據(jù)收集等功能,其中數(shù)據(jù)收集功能主要采集四類數(shù)據(jù):實時數(shù)據(jù)、畫像數(shù)據(jù)、調用鏈接數(shù)據(jù)生成以及線程數(shù)據(jù)分析數(shù)據(jù)。為實現(xiàn)實時數(shù)據(jù)采集,UAVStack設計了CaptureFramework框架,提供統(tǒng)一的數(shù)據(jù)抓取行為和生成抓取結果能力。
CaptureFramework運行原理 關鍵技術說明:JavaAssist
Monitor捕獲體系
precap/docap
架構說明:捕獲點:支持Tomcat、MSCP、Springboot、Jetty埋點。
UAVServer單例:作為統(tǒng)一的捕獲入口點,提供了同步和異步方法。
StandardMonitor:實現(xiàn)了Monitor接口,是實時數(shù)據(jù)抓取實現(xiàn)類,提供了doCapture方法,負責抓取行為和生成抓取結果。
MonitorElemCapHandler:不同的抓取邏輯和抓取點的共同接口實現(xiàn)不同的埋點邏輯,提供了抓取行為的方法preCap與doCap以及生成抓取結果的方法preStore。
StandardMonitorRepository:存儲實時數(shù)據(jù)抓取數(shù)據(jù)結構。
DataObserver:暴露了JMX/HTTP接口數(shù)據(jù)。
關鍵類說明Monitor實時監(jiān)控主要是從DefaultMonitorSupporter類啟動初始化StandardMonitor對象,通過CaptureFramework將monitor對象安裝到DataStore對象中。
DataObserver提供JMX/HTTP服務,供后續(xù)MA抓取使用,其中Http服務注冊了三個handler,分別為HttpJEEJVMObserver、HttpJEEMonitorObserver、 HttpJEEProfileObserver。不同的handler暴露了不同的接口。
MonitorHandler包下的Handler類具體處理Monitor的指標數(shù)據(jù)計算和統(tǒng)計。
捕獲點剖析CaptureFrameWork框架提供了統(tǒng)一的捕獲入口點,在UAVServer中分別提供了同步方法與異步方法:
同步捕獲入口點:
runMonitorCaptureOnServerCapPoint
異步捕獲入口點:
runMonitorAsyncCaptureOnServerCapPoint
同步與異步調用的差異分析:
異步比同步多增加了一個參數(shù)CaptureContextMapFromAnotherThread,該參數(shù)若不為空,則需要合并上下文的信息。一般情況下在使用異步方法埋點時,在方法執(zhí)行前調用異步捕獲方法傳入的CaptureContextMapFromAnotherThread為空,并返回封裝好的上下文信息,在方法執(zhí)行結束后調用異步捕獲方法傳入上下文信息,并進行上下文信息合并,再進行具體的捕獲操作,具體可參考以下代碼片段:
方法執(zhí)行前的異步調用:
方法執(zhí)行后的異步調用如下,其中ccMap為異步調用返回的封裝好的上下文信息:
抓取行為剖析Monitor接口:提供了多個接口,其中最主要的是doCapture與doPreStore方法,doCapture用來實現(xiàn)在特定的捕獲點執(zhí)行抓取數(shù)據(jù)行為,doPreStore方法用來實現(xiàn)在存儲到數(shù)據(jù)結構之前的一些捕獲動作,做一些特殊數(shù)據(jù)的處理。
StandardMonitor類: Monitor接口的具體實現(xiàn)類。
StandardMonitorRepository類:存儲實時數(shù)據(jù)抓取數(shù)據(jù)結構。
MonitorElementInstance接口:存儲實時數(shù)據(jù)抓取數(shù)據(jù)結構的實例接口。
StandardMonitorElementInstance類:MonitorElementInstance接口的具體實現(xiàn)類。
無論是同步捕獲入口點還是異步捕獲入口點都會執(zhí)行doCapture方法,代碼片段如下:
monitor.doCapture是調用了Monitor接口中的doCapture,其實現(xiàn)類是StandardMonitor。
StandardMonitor中的doCapture方法主要做了如下操作:
根據(jù)參數(shù)獲取當前的MonitorElement數(shù)組,MonitorElement數(shù)組通過StandardMonitorRepository的getElementByCapId實現(xiàn);
循環(huán)處理MonitorElement數(shù)組,獲取捕捉數(shù)據(jù)實現(xiàn)類,根據(jù)實現(xiàn)類獲取當前要執(zhí)行的handler,最后根據(jù)當前獲取的handler判斷捕獲階段(precap/docap),然后進行相應的處理。不同的handler根據(jù)不同的特性處理生成MonitorElementInstance,最后將結果存儲在StandardMonitorRepository數(shù)據(jù)結構中。
以ServerEndRespTimeCapHandler(服務端抓取行為)為例:
preCap方法:只記錄了服務的開始請求時間。
doCap方法:根據(jù)不同的monitorElemId進行不同的邏輯處理,最后封裝好MonitorElementInstance實例,然后再進行抓取行為結果的處理,其中包含最大值消峰、最大值、最小值、返回狀態(tài)碼、時間戳更新、計數(shù)等相應的數(shù)據(jù)處理。
什么是實時數(shù)據(jù)即運行時數(shù)據(jù),指的是在程序運行時產(chǎn)生的信息,程序占用的CPU、堆內存、JVM信息以及提供服務訪問與客戶端調用的相關統(tǒng)計信息(平均響應時間、訪問計數(shù)等)。
服務端數(shù)據(jù)采集DefaultMonitorSupporter的實現(xiàn)
服務端數(shù)據(jù)采集以DefaultMonitorSupporter.start為入口點,構建monitor實例:
默認構建service類型的StandardMonitor實例,其中包含StandardMonitorRepository實例,StandardMonitorRepository實例注冊monitor,一個該實例包含多個MonitorElement實例,并將所有的MonitorElement實例保存在elemsMap屬性中。
elemsMap屬性根據(jù)不同的采集對象保存不同的采集類handler:
ServerEndRespTimeCapHandler:采集Server、APP、URL的響應時間和加載計數(shù)等.
JVMStateCapHandler:采集jvm狀態(tài),包括Heap使用、GC計數(shù)、線程計數(shù)、CPU、class計數(shù)等。
代碼片段如下:
客戶端數(shù)據(jù)采集DefaultClientMonitorSupporter的實現(xiàn)
客戶端數(shù)據(jù)采集以DefaultClientMonitorSupporter.start為入口點,構建monitor實例:
默認構建client類型的StandardMonitor實例,其中包含StandardMonitorRepository實例,StandardMonitorRepository實例注冊monitor,一個該實例包含多個MonitorElement實例,并將所有的MonitorElement實例保存在elemsMap屬性中。
elemsMap:屬性只保存一個ClientRespTimeCapHandler采集類。
ClientRespTimeCapHandler:采集客戶端的響應時間和加載計數(shù)等。
無論是客戶端的數(shù)據(jù)采集還是服務端的數(shù)據(jù)采集,都會將monitor安裝到DataObserver中;并且最后都會將構建成功的monitor綁定至指定的捕獲方法(即precap和docap)。
DataObServer的實現(xiàn)DataObServer提供了兩種模式來暴露接口數(shù)據(jù),分別為JMX和HTTP:
HTTP方式:
由HttpDataObserverWorker.start作為入口點,分別注冊了三個handler,分別為獲取JVM數(shù)據(jù)、Monitor數(shù)據(jù)以及profile數(shù)據(jù)的handler。不同的handler暴露了不同的接口,最終都返回了JSON格式的數(shù)據(jù)。
JMX方式:
JMX代理通過getMBeanInfo方法獲取暴露的接口,來獲取數(shù)據(jù);
DataObServer還提供了安裝與卸載monitor、增加與移除listener以及獲取profile和monitor的方法:
讀完本文后相信大家對CaptureFramework框架有了基本的了解,并對CaptureFramework的應用有了一定的感悟。本文只介紹了MOF相關的一部分內容,若大家對MOF感興趣,歡迎大家后臺留言或添加小助手“uavstack-assist”申請加入官方用戶群,相信您一定會有所收獲。
官方網(wǎng)站:https://uavorg.github.io/main/
開源地址:https://github.com/uavorg
UAV MOF工作原理之Agent注入機制原理:http://college.creditease.cn/...
宜信技術學院
文章版權歸作者所有,未經(jīng)允許請勿轉載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉載請注明本文地址:http://m.hztianpu.com/yun/72859.html
摘要:攔截之前的準備在應用啟動的特定生命周期內改寫字節(jié)碼,植入特定的邏輯處理代碼進行攔截。劫持通過字節(jié)碼改寫動態(tài)代理等技術,在客戶端調用代碼中嵌入特定處理邏輯,獲取調用相關的信息,如調用地址調用協(xié)議調用結果等。 這次我們?yōu)榇蠹規(guī)碇虚g件增強框架專題(MOF)的最后一篇文章,為大家講解MOF中的InterceptFramework框架。該框架可以在應用啟動過程中獲取畫像信息,實現(xiàn)應用畫像數(shù)據(jù)采...
摘要:頁面展示的統(tǒng)計追蹤等信息則通過的接口獲取四功能展示數(shù)據(jù)庫監(jiān)控目前已實現(xiàn)的功能有分類統(tǒng)計數(shù)據(jù)庫連接池監(jiān)控慢耗時分布統(tǒng)計慢統(tǒng)計慢追蹤以及調用鏈日志關聯(lián)功能。 作者: 王林林 出處:UAVStack智能運維 來源:宜信技術學院技術沙龍001期|AI中臺:一種敏捷的智能業(yè)務支持方案|宜信技術沙龍 3月28日晚8點線上直播,點擊報名 UAVStack是一個全維監(jiān)控與應用運維平臺。UAV.Mon...
摘要:在該版本發(fā)布之后,開發(fā)團隊并不會繼續(xù)發(fā)布新的特性,而會著眼于進行重大的錯誤修復。發(fā)布每六個星期,團隊就會創(chuàng)建新的分支作為發(fā)布通道,本文即是對新近發(fā)布的版本進行簡要介紹。 showImg(https://segmentfault.com/img/remote/1460000013229009); 前端每周清單專注前端領域內容,以對外文資料的搜集為主,幫助開發(fā)者了解一周前端熱點;分為新聞熱...
摘要:原文地址沒想到這篇文章這么晚才出,最近發(fā)生了太多的事情,已致于心態(tài)全無,最終也離開了現(xiàn)在的公司,沒想到是這么的狼狽一個人的光芒可以放到很大也可以小到微乎其微,如果不能好好的規(guī)劃最終也只能默默的承受世上沒有相同的感同身受,感受真實才能真正的 原文地址:https://gmiam.com/post/react-... 沒想到這篇文章這么晚才出,最近發(fā)生了太多的事情,已致于心態(tài)全無,最終也離...
閱讀 2346·2023-04-25 14:50
閱讀 1411·2021-10-13 09:50
閱讀 1934·2019-08-30 15:56
閱讀 1910·2019-08-29 15:29
閱讀 2949·2019-08-29 15:27
閱讀 3634·2019-08-29 15:14
閱讀 1254·2019-08-29 13:01
閱讀 3352·2019-08-26 14:06