如何判別分布式系統的優劣

如今(jin)，分布(bu)式系統(tong)(tong)正在對各行業(ye)產生(sheng)巨(ju)大影(ying)響，已經(jing)進入軍(jun)隊(dui)、公安(an)、氣象(xiang)、交通、電力等重要機(ji)構的指揮中心、監(jian)控中心，為用(yong)戶系統(tong)(tong)可(ke)視化、對接和互(hu)聯互(hu)通帶來(lai)強大的應用(yong)，分布(bu)式系統(tong)(tong)的優劣判(pan)別，主要看以下七個方(fang)面：

一、看核心技術

分(fen)布(bu)式(shi)(shi)產品(pin)的(de)核心基礎是音(yin)視頻網絡編(bian)解(jie)碼(ma)算法(fa)，優(you)秀(xiu)的(de)編(bian)解(jie)碼(ma)算法(fa)是一款(kuan)好(hao)的(de)分(fen)布(bu)式(shi)(shi)產品(pin)誕生的(de)前提(ti)。通過了解(jie)一款(kuan)分(fen)布(bu)式(shi)(shi)產品(pin)采用的(de)核心技術(shu)算法(fa)，可以(yi)快(kuai)速的(de)初(chu)步判定一款(kuan)分(fen)布(bu)式(shi)(shi)產品(pin)的(de)性能(neng)優(you)劣，從而選擇最適合(he)的(de)分(fen)布(bu)式(shi)(shi)產品(pin)。市場上主流的(de)分(fen)布(bu)式(shi)(shi)根據其技術(shu)特(te)點(dian)與產生時間可以(yi)劃(hua)分(fen)為以(yi)下3種，第(di)一代(dai)深(shen)壓(ya)縮(suo)分(fen)布(bu)式(shi)(shi)技術(shu)、第(di)二代(dai)淺(qian)壓(ya)縮(suo)分(fen)布(bu)式(shi)(shi)技術(shu)與第(di)三代(dai)雙(shuang)引擎分(fen)布(bu)式(shi)(shi)技術(shu)。

1、第一代深壓縮分布式

深壓縮(suo)分(fen)(fen)布式產(chan)品是(shi)以H.264 和(he) H.265算(suan)法為主的(de)第(di)一代分(fen)(fen)布式產(chan)品類(lei)(lei)型，也是(shi)市面(mian)上主流的(de)分(fen)(fen)布式產(chan)品類(lei)(lei)型，它的(de)優勢(shi)是(shi)占用帶寬低(di)、具(ju)備完善的(de)功能、采用標準視頻編解碼協議，劣勢(shi)是(shi)畫面(mian)損(sun)失較大、畫面(mian)延時(shi)較大。

2、第二代淺壓縮分布式

淺壓(ya)縮(suo)分(fen)布式是區別于深壓(ya)縮(suo)分(fen)布式的第二代分(fen)布式，主要針對性的解(jie)決了深壓(ya)縮(suo)分(fen)布式產(chan)品顯示畫(hua)面質量差(cha)、延(yan)時高等(deng)問(wen)題，優(you)勢在于畫(hua)面質量好、傳輸延(yan)時低(di)，劣勢是占(zhan)用帶寬大、標準化(hua)程度低(di)。

3、第三代雙引擎分布式

雙(shuang)引擎分(fen)(fen)布(bu)式通過采用雙(shuang)分(fen)(fen)布(bu)式核心(xin)的設(she)計，首次將前兩代分(fen)(fen)布(bu)式產(chan)品特點(dian)優勢進行整合。一方(fang)面通過“淺(qian)壓縮(suo)核心(xin)”實現視頻(pin)高質(zhi)量無損顯示效果(guo)、低延時傳(chuan)輸、完(wan)善了(le)多(duo)種使用功(gong)能；同(tong)時具備(bei)“深壓縮(suo)核心(xin)”在保持淺(qian)壓縮(suo)顯示效果(guo)的同(tong)時，解(jie)決了(le)實際使用中與(yu)市面上(shang)H.264/H.265設(she)備(bei)兼容、低網絡帶(dai)寬下遠(yuan)距離視頻(pin)分(fen)(fen)享(xiang)的需求。

二、看功能覆蓋

隨(sui)著顯(xian)(xian)控(kong)市場的逐步發展，各行業(ye)對于音視(shi)頻顯(xian)(xian)控(kong)的應用(yong)也愈(yu)加復(fu)雜。考量(liang)一款分布(bu)式(shi)產品的優劣，其中(zhong)很關鍵的一點，便是看其是否覆蓋了(le)行業(ye)常(chang)用(yong)的功(gong)(gong)能(neng)需求。各分布(bu)式(shi)廠商(shang)往往提(ti)供了(le)多種功(gong)(gong)能(neng)應用(yong)，但(dan)其中(zhong)真正具備考量(liang)意義與值(zhi)得評估的主要有(you)以(yi)下三大功(gong)(gong)能(neng)：網絡信號切換功(gong)(gong)能(neng)、大屏(ping)拼接(jie)顯(xian)(xian)示功(gong)(gong)能(neng)與實時坐(zuo)席控(kong)制功(gong)(gong)能(neng)。

1、網絡信號切換功能

音視(shi)頻的網絡(luo)編解(jie)碼能力(li)是分布式系(xi)統(tong)產品最(zui)重要的基礎能力(li)。主(zhu)要功能包括：不(bu)同(tong)種類的音視(shi)頻信號(hao)傳(chuan)輸(shu)、不(bu)同(tong)分辨率(lv)的音視(shi)頻信號(hao)傳(chuan)輸(shu)、畫面無(wu)黑(hei)場、無(wu)中(zhong)間狀態切換、音頻視(shi)頻獨立傳(chuan)輸(shu)切換等。

2、大屏拼接顯示功能

分布式大(da)屏拼接顯(xian)示(shi)功能(neng)主要(yao)包括(kuo)：大(da)屏拼接功能(neng)、大(da)屏多畫(hua)(hua)面(mian)顯(xian)示(shi)、畫(hua)(hua)中(zhong)畫(hua)(hua)顯(xian)示(shi)、任意布局調整(zheng)、預案快(kuai)速(su)切換、大(da)屏底圖顯(xian)示(shi)、信號預覽(lan)、大(da)屏狀態回顯(xian)、大(da)屏滾動字幕等。

3、實時坐席控制功能

分(fen)布式坐(zuo)席(xi)(xi)協(xie)作功能可以快速便捷的解決坐(zuo)席(xi)(xi)間信(xin)息共享(xiang)和處理的問題，其主要核心功能包括：“一人(ren)多機(ji)”控制，“人(ren)機(ji)分(fen)離”遠端PC實(shi)(shi)時控制，坐(zuo)席(xi)(xi)與大屏的視頻(pin)互動，坐(zuo)席(xi)(xi)與坐(zuo)席(xi)(xi)間的視頻(pin)互動，UKey、硬(ying)盤、攝像頭、打印機(ji)等USB設備識別，信(xin)號源實(shi)(shi)時預(yu)監等。

三、看畫面還原度

基于指揮中心、控制室等分(fen)(fen)布式(shi)(shi)(shi)系統(tong)(tong)應(ying)用場景(jing)對超高圖像畫質呈(cheng)現(xian)(xian)的(de)(de)需求，畫面(mian)還原(yuan)度(du)(du)也是衡量(liang)分(fen)(fen)布式(shi)(shi)(shi)系統(tong)(tong)優(you)劣的(de)(de)一大標準(zhun)。好(hao)的(de)(de)分(fen)(fen)布式(shi)(shi)(shi)系統(tong)(tong)采(cai)用業界領(ling)先的(de)(de)圖像處理引擎技術，確(que)保所有(you)視音(yin)頻信號實時(shi)處理顯示，同時(shi)顯示畫面(mian)不偏色、不丟失細節、不出現(xian)(xian)黑(hei)屏/馬賽克。分(fen)(fen)辨分(fen)(fen)布式(shi)(shi)(shi)產品的(de)(de)畫面(mian)還原(yuan)度(du)(du)主(zhu)要有(you)兩種方法：

1、專業靜態測試圖片

通過對比原始畫面與編(bian)解碼(ma)畫面的(de)差(cha)異，進行測試，在圖片全(quan)屏顯示的(de)情(qing)況下：是否會出現線條虛化(hua)、甚(shen)至(zhi)完(wan)全(quan)丟失問題(ti)；文字內(nei)容、花紋是否保留完(wan)整；色彩是否豐(feng)富、色彩變化(hua)是否平滑；圖像4:4:4是否清晰可見。

2、高清動態畫面測試

播放快速變化、內容(rong)復雜、色(se)彩(cai)鮮艷的視頻(pin)，通(tong)過肉眼觀察，是否出現(xian)畫面(mian)模糊(hu)、馬賽克、畫面(mian)卡頓、黑(hei)屏(ping)等問題。

四、看大屏同步性

指揮(hui)調度離不(bu)開可視化，尤其(qi)對于(yu)指揮(hui)中心而言，高清圖像呈現、實時(shi)同(tong)步傳輸(shu)尤為關鍵。部分分布式(shi)產品由于(yu)每個(ge)節點(dian)畫面傳輸(shu)至拼接(jie)大屏的時(shi)間(jian)不(bu)同(tong)，會直(zhi)接(jie)導致大屏幕顯示(shi)不(bu)同(tong)步及圖像抖(dou)動、撕裂的現象出現，非(fei)常影響用戶的觀看體驗。分布式(shi)系統的同(tong)步性優劣(lie)可通(tong)過(guo)專業的測(ce)試(shi)視頻及方(fang)法進行測(ce)試(shi)：

1、專業視頻播放

多塊拼接屏播(bo)(bo)放(fang)同一(yi)個視(shi)頻(pin)(pin)(pin)（推薦專業測試視(shi)頻(pin)(pin)(pin)），對比畫面中(zhong)顯示(shi)的動態線條、秒表(biao)與幀號的差(cha)異。將播(bo)(bo)放(fang)測試視(shi)頻(pin)(pin)(pin)的信號源，顯示(shi)在大屏的不同屏幕上(shang)。通過(guo)相機(ji)進行拍照或(huo)者慢動作攝(she)影，對比不同屏幕上(shang)顯示(shi)的秒表(biao)數(shu)值(zhi)、與畫面幀率序號是否為同一(yi)幀、同一(yi)毫(hao)秒。如果出現幀序號不同，則大屏不同步。根據(ju)對應的秒表(biao)時差(cha)，可以明(ming)確不同步的嚴重(zhong)程度。

2、快速動態圖像播放

在(zai)不具備條件(jian)的(de)情況(kuang)下，也可(ke)(ke)以(yi)通過播放快速運動的(de)動作視(shi)頻、人物(wu)視(shi)頻等進(jin)行肉(rou)眼觀察。好的(de)分布(bu)式(shi)系統應采用專業的(de)同步(bu)顯(xian)(xian)示(shi)技術，在(zai)畫面細節豐富、切換迅(xun)速的(de)情況(kuang)下，依(yi)然可(ke)(ke)以(yi)保(bao)證(zheng)卓越(yue)的(de)同步(bu)性與(yu)圖像顯(xian)(xian)示(shi)質量，保(bao)證(zheng)視(shi)頻每(mei)一幀輸出均可(ke)(ke)以(yi)完全同步(bu)。

五、看坐席延時性

視頻信號由信號源傳(chuan)輸至坐席(xi)顯示(shi)的(de)(de)過(guo)程中(zhong)(zhong)不(bu)可(ke)避(bi)免的(de)(de)會出現(xian)(xian)顯示(shi)延遲(chi)的(de)(de)現(xian)(xian)象，延遲(chi)時(shi)間從幾十毫(hao)秒(miao)到幾百毫(hao)秒(miao)甚至更長，然而鍵盤鼠標等控(kong)制(zhi)信號的(de)(de)傳(chuan)輸延時(shi)遠小于視頻信號的(de)(de)傳(chuan)輸延時(shi)，使(shi)得坐席(xi)控(kong)制(zhi)中(zhong)(zhong)出現(xian)(xian)屏(ping)幕(mu)顯示(shi)畫面慢于實際鼠標數據(ju)傳(chuan)輸的(de)(de)現(xian)(xian)象，尤(you)其是當鼠標鍵盤配合視頻畫面對信號源進(jin)行(xing)控(kong)制(zhi)、操(cao)作(zuo)時(shi)由于圖像的(de)(de)變化跟不(bu)上人的(de)(de)動作(zuo)以及大(da)腦的(de)(de)反(fan)應，會出現(xian)(xian)鼠標無(wu)法控(kong)制(zhi)、點擊(ji)不(bu)精確等現(xian)(xian)象，極大(da)的(de)(de)影響(xiang)用戶(hu)的(de)(de)操(cao)作(zuo)體驗(yan)。測(ce)試方法有：

1、專業延時測試視頻

通過專業(ye)的(de)(de)演示測試(shi)視(shi)頻可(ke)以(yi)快速精確(que)的(de)(de)判斷(duan)分(fen)布式(shi)系統的(de)(de)延(yan)時。使用(yong)相機水平(ping)拍攝“原始圖(tu)像”與(yu)“KVM坐(zuo)席圖(tu)像”，對(dui)比原始圖(tu)像與(yu)分(fen)布式(shi)傳輸圖(tu)像的(de)(de)“時間差”即(ji)可(ke)得到分(fen)布式(shi)傳輸的(de)(de)具體數值。由(you)于不同相機的(de)(de)快門曝光時間與(yu)網絡固(gu)有差異，可(ke)以(yi)采(cai)用(yong)多張圖(tu)片取平(ping)均值的(de)(de)方式(shi)確(que)定延(yan)時。

2、實際操作體驗

在沒有條(tiao)件(jian)的情況下(xia)，可以通過(guo)鼠(shu)標實操，來體(ti)驗(yan)延時差異(yi)。具體(ti)方法包(bao)括：

（1）連續晃動鼠(shu)標(biao)(biao)，查看(kan)鼠(shu)標(biao)(biao)靈敏度；

（2）快速移(yi)動鼠標點(dian)(dian)擊(ji)某處，查看是否(fou)可以精(jing)確點(dian)(dian)擊(ji)到目標位置；

（3）通過鍵盤鍵入文本內(nei)容，查看字符顯示(shi)速度。

分布式系統應在保障高品質(zhi)圖像傳(chuan)(chuan)輸(shu)質(zhi)量的前提下，大(da)幅(fu)度降(jiang)低音(yin)視(shi)頻編解(jie)碼傳(chuan)(chuan)輸(shu)所產生(sheng)的視(shi)頻延時(shi)，保證原(yuan)始信(xin)號畫(hua)面實時(shi)傳(chuan)(chuan)輸(shu)、音(yin)視(shi)頻實時(shi)同步(bu)傳(chuan)(chuan)輸(shu)以及坐席鼠標操作流暢。

六、看集中管控

隨(sui)著科(ke)學技(ji)術的(de)不斷(duan)發(fa)展，指(zhi)揮(hui)中(zhong)心(xin)、控制(zhi)中(zhong)心(xin)、監控中(zhong)心(xin)、數(shu)據中(zhong)心(xin)、會議室等場景的(de)信息化(hua)系(xi)(xi)統(tong)愈(yu)加復雜(za)，是否可(ke)以將多個(ge)獨(du)立(li)系(xi)(xi)統(tong)進行統(tong)一(yi)管控也是衡量(liang)分布式(shi)系(xi)(xi)統(tong)優劣的(de)一(yi)大標準(zhun)。好(hao)的(de)分布式(shi)系(xi)(xi)統(tong)應該將多個(ge)獨(du)立(li)的(de)系(xi)(xi)統(tong)進行統(tong)一(yi)接(jie)入(ru)和管控，并通過觸(chu)控終端設備實現統(tong)一(yi)的(de)指(zhi)揮(hui)調度，為客戶帶來自由方(fang)便、快捷準(zhun)確、靈活可(ke)視的(de)操作體(ti)驗。集中(zhong)管控主要看這幾個(ge)要點：

1、視頻可視化操作

視頻控制可視化是集中管控的(de)基(ji)礎功能(neng)需求，不僅要(yao)在操作(zuo)過程中能(neng)夠查看信號(hao)源的(de)預(yu)監以及大(da)屏幕的(de)回(hui)顯畫(hua)面，還要(yao)可以對預(yu)案(an)的(de)布局(ju)進行實時預(yu)覽，從(cong)而(er)方(fang)便操作(zuo)人員(yuan)的(de)畫(hua)面調(diao)取和預(yu)案(an)切換，減少誤操作(zuo)的(de)幾率(lv)。

2、音頻可視化調節

除(chu)了視頻系統以外，音頻系統也是分(fen)布式(shi)系統控制中的(de)重要部分(fen)。用(yong)戶在音頻調節時(shi)，經(jing)常需要實時(shi)查(cha)看全部通道(dao)的(de)實時(shi)音量大小(xiao)及靜音狀態，這(zhe)樣(yang)才(cai)能進(jin)行(xing)精(jing)準(zhun)的(de)操(cao)(cao)作。此(ci)外，每個通道(dao)的(de)實時(shi)電平(ping)反饋也是用(yong)戶進(jin)行(xing)操(cao)(cao)作的(de)重要參考(kao)，音頻調節的(de)可視化可以給用(yong)戶帶來直觀的(de)操(cao)(cao)作控制體驗。

3、環境可視化控制

除(chu)了分布式系(xi)統(tong)(tong)(tong)內(nei)的(de)(de)音視頻設(she)備(bei)(bei)(bei)，周(zhou)邊環(huan)境(jing)中(zhong)(zhong)(zhong)的(de)(de)燈光、屏幕、電源等周(zhou)邊設(she)備(bei)(bei)(bei)，也是系(xi)統(tong)(tong)(tong)集(ji)中(zhong)(zhong)(zhong)管(guan)控(kong)的(de)(de)重要對象。如果不(bu)能(neng)在同一(yi)個(ge)界面中(zhong)(zhong)(zhong)進行(xing)管(guan)控(kong)，就(jiu)失去了集(ji)中(zhong)(zhong)(zhong)管(guan)控(kong)的(de)(de)意義。對于系(xi)統(tong)(tong)(tong)內(nei)的(de)(de)各類設(she)備(bei)(bei)(bei)，不(bu)僅要能(neng)準確(que)的(de)(de)控(kong)制(zhi)各類設(she)備(bei)(bei)(bei)的(de)(de)開關，還(huan)要能(neng)夠實時(shi)查看各個(ge)設(she)備(bei)(bei)(bei)的(de)(de)運行(xing)狀態，實現(xian)真正的(de)(de)環(huan)境(jing)控(kong)制(zhi)可視化。

4、多用戶同步控制

分(fen)(fen)布式(shi)(shi)系統(tong)(tong)的(de)(de)“分(fen)(fen)布”不僅(jin)僅(jin)體現在(zai)音視頻節點(dian)的(de)(de)分(fen)(fen)布，還體現在(zai)控(kong)(kong)制終端(duan)的(de)(de)分(fen)(fen)布。因此(ci)，多用(yong)戶(hu)之(zhi)間如何進(jin)行(xing)(xing)協作控(kong)(kong)制，就成為(wei)了分(fen)(fen)布式(shi)(shi)系統(tong)(tong)集中管控(kong)(kong)的(de)(de)關鍵(jian)。系統(tong)(tong)應能(neng)將(jiang)各(ge)個(ge)用(yong)戶(hu)進(jin)行(xing)(xing)統(tong)(tong)一管理(li)，并將(jiang)控(kong)(kong)制反饋實時(shi)同步在(zai)各(ge)個(ge)管理(li)員的(de)(de)終端(duan)界面上(shang)，這(zhe)樣才能(neng)夠準確的(de)(de)進(jin)行(xing)(xing)協作控(kong)(kong)制。

七、看運維管理

智能(neng)化的(de)運(yun)維管理(li)就像人體的(de)免(mian)疫(yi)系統一樣不可(ke)或缺，它可(ke)以(yi)圍繞業(ye)務系統進行日常安全監(jian)測(ce)，掌(zhang)握系統的(de)各項指標，并根據指標作出“健(jian)康(kang)”與(yu)否的(de)判斷；對(dui)檢測(ce)到的(de)設備運(yun)行不正常狀態或者(zhe)設備故障發生預警，并及時(shi)通知運(yun)維管理(li)人員進行維護(hu)。這(zhe)種運(yun)維方(fang)式側重于設備故障隱患和缺陷(xian)的(de)早(zao)期發現和處理(li)，提高(gao)了(le)設備的(de)穩定性(xing)和可(ke)靠性(xing)。專業(ye)的(de)運(yun)維管理(li)解(jie)決方(fang)案涵蓋如下要(yao)點：

1、動態展示系統連接的拓撲圖

與(yu)(yu)分布式(shi)(shi)相關(guan)的周邊系(xi)統(tong)，尤(you)其(qi)是(shi)網(wang)絡系(xi)統(tong)，都與(yu)(yu)最終畫面(mian)上屏(ping)的響應速(su)度、圖像質量、操作延遲、拼接同步性等效(xiao)果息(xi)息(xi)相關(guan)。分布式(shi)(shi)節點通過交換機、路(lu)由器(qi)等網(wang)絡設備連接，任何一(yi)個網(wang)絡節點故(gu)(gu)障、掉(diao)線，都會使得某路(lu)畫面(mian)黑屏(ping)，這時需要能夠及時定位(wei)到(dao)故(gu)(gu)障點，才可以在最短時間內解決(jue)網(wang)絡故(gu)(gu)障。

因此分(fen)布式系(xi)統(tong)的運維管理(li)軟件需要能提供一(yi)個動態(tai)變化的設備連接拓撲(pu)圖，通過拓撲(pu)圖直(zhi)觀地看(kan)到分(fen)布式設備及周(zhou)邊設備的在線狀態(tai)與故障狀態(tai)，不用(yong)實際到現場排查(cha)，就可以反饋給(gei)用(yong)戶(hu)到底是哪個環節(jie)發生問題(ti)。

2、圖形化查看設備詳細運行指標

除了(le)(le)設(she)備的在(zai)線與否(fou)之(zhi)外，為(wei)了(le)(le)更好(hao)的掌(zhang)握系統運行(xing)狀態(tai)與趨勢，設(she)備的詳細運行(xing)指標(biao)也同樣關鍵，如各個分(fen)布式(shi)節(jie)點的輸(shu)入輸(shu)出分(fen)辨率、幀(zhen)率、視(shi)頻傳輸(shu)速率等。與分(fen)布式(shi)設(she)備連接(jie)的交換(huan)機，也需要實時(shi)了(le)(le)解(jie)其運行(xing)時(shi)間、溫度、CPU占(zhan)用率、內存占(zhan)用率、某端口(kou)流(liu)量、抖動(dong)、丟包率等。只有掌(zhang)握了(le)(le)這些信息，才能在(zai)發生畫面抖動(dong)、卡(ka)頓(dun)、錯(cuo)位(wei)等“軟(ruan)問(wen)題”時(shi)，精準定位(wei)到問(wen)題所(suo)在(zai)，降(jiang)低分(fen)布式(shi)系統可能受到的外界環境干擾。

3、具備故障告警與預警提示

傳統(tong)的運維模式(shi)通常是被動式(shi)的，即(ji)用戶發現問(wen)題(ti)(ti)，再排(pai)查問(wen)題(ti)(ti)所(suo)在(zai)。而現代(dai)化的分布式(shi)運維更應(ying)該是主動式(shi)的，即(ji)系統(tong)一旦發生(sheng)故(gu)障(zhang)，分布式(shi)系統(tong)要能主動以頁面(mian)的彈(dan)窗(chuang)、聲音或(huo)郵件、短信等(deng)渠道，為用戶做(zuo)出(chu)告警提(ti)示，即(ji)使用戶不再指揮中心或(huo)會議室內，也能通過手(shou)(shou)機等(deng)方式(shi)遠(yuan)程掌握分布式(shi)系統(tong)的狀態。另外，智能化的運維管(guan)理(li)應(ying)不僅僅是發生(sheng)問(wen)題(ti)(ti)、解決問(wen)題(ti)(ti)，更應(ying)該利用大數據(ju)(ju)等(deng)手(shou)(shou)段，記錄(lu)系統(tong)運行(xing)數據(ju)(ju)，并對未來趨勢進行(xing)預測，在(zai)設(she)備可能發生(sheng)某個問(wen)題(ti)(ti)之前(qian)，前(qian)置性(xing)的做(zuo)出(chu)預警提(ti)示，真正提(ti)高分布式(shi)系統(tong)的穩定性(xing)。

4、建立完善并有記錄的運維工作流程

擁有了設備的(de)監測(ce)與(yu)告警，用戶可以最(zui)短時間內(nei)掌握系統故障(zhang)點，但如何解決這些故障(zhang)，依舊是一個(ge)值得深究的(de)問題。分布(bu)式(shi)系統具有無限的(de)擴展性與(yu)覆蓋(gai)度(du)，往往部署在大地域中。管理(li)分布(bu)式(shi)的(de)運(yun)維人員也常常不是一個(ge)人，而是上(shang)下級單位、各(ge)個(ge)機(ji)構多人配合。

效率最高的運維解決方案是多人分工配合，如管理員在指揮中心對整個分布式系統監管，發現故障點后，遠程指導操作員實際到現場處理，并可通過系統實時判斷問題是否解決。這就需要分布式系統提供一(yi)個科學的運維(wei)工(gong)作(zuo)流程，從發現(xian)問題、派工(gong)單下發、到現(xian)場解決(jue)與問題反饋，運維(wei)人(ren)員只(zhi)需按照標準化的運維(wei)流程來操作(zuo)，并在系(xi)統內記錄相(xiang)關工(gong)作(zuo)信息(xi)，即可高效(xiao)率的完成運維(wei)管理工(gong)作(zuo)。

5、覆蓋系統級別的統計與分析

真正的分(fen)(fen)布(bu)式運(yun)(yun)(yun)維(wei)管(guan)理(li)是一門系(xi)統性的科學與(yu)工(gong)作(zuo)，應(ying)(ying)該做到“精(jing)細(xi)化運(yun)(yun)(yun)維(wei)”。所謂“精(jing)細(xi)化運(yun)(yun)(yun)維(wei)”，即不僅(jin)(jin)僅(jin)(jin)對設(she)備(bei)運(yun)(yun)(yun)行狀態(tai)進(jin)行監管(guan)，也要收集并記錄運(yun)(yun)(yun)維(wei)工(gong)作(zuo)流中的告警響應(ying)(ying)時(shi)間(jian)、工(gong)單(dan)解決時(shi)間(jian)、故障(zhang)處理(li)時(shi)間(jian)等信息，同(tong)時(shi)通過數據(ju)的挖掘與(yu)關聯，對各類(lei)設(she)備(bei)的故障(zhang)率(lv)、高風險參數、視頻(pin)質(zhi)量影響率(lv)等進(jin)行分(fen)(fen)析，生成綜合性的多(duo)維(wei)度系(xi)統運(yun)(yun)(yun)行報(bao)表，幫助用戶持續改善分(fen)(fen)布(bu)式系(xi)統的運(yun)(yun)(yun)維(wei)管(guan)理(li)工(gong)作(zuo)與(yu)應(ying)(ying)用方式。