芒果视频下载

品牌分類   知識分類          
移動端
  • 買購網APP
  • 手機版Maigoo
  

分布式系統的技術棧分析 分布式管理系統常用技術和應用場景

本文章由注冊用戶 知無涯 上傳提供 2024-11-30 評論 0
摘要:分布式系統是一種復雜的系統,應用過程中會衍生出很多分布式需求,為了應對這些需求,分布式系統的技術棧主要有分布式通信技術、分布式資源管理和負載調度技術、分布式協調與同步技術、分布式存儲技術等,不同的技術在應用場景方面也有所不同,下面一起來看看分布式系統的技術棧分析以及分布式管理系統常用技術和應用場景吧。

一、分布式系統的技術棧分析

分布式系統的(de)出(chu)現是(shi)業(ye)(ye)務(wu)發(fa)展導致的(de)最終結果,而由于業(ye)(ye)務(wu)的(de)拆分(fen)(fen),我們又被(bei)迫會衍(yan)生(sheng)出(chu)更(geng)多的(de)分(fen)(fen)布式需(xu)求來,以及應對這些需(xu)求的(de)技(ji)術(shu):

1、因為業務拆分的多,業務對應的模塊之間就需要通信,為了保證通信的快速可靠,我們需要掌握分布式通信技術

2、業務拆分的過多,每個模塊可能還需要搞集群,那么多服務器資源,為了能夠保證資源的精準分配,我們還需要考慮分布式資源管理和負載調度技術

3、業務拆分之后,模塊與模塊之間又需要對很多共享數據做訪問,為了保證安全完整的數據狀態,我們也要用到分布式協調與同步技術

4、到了業務拆分的階段,數據必然龐大,為了數據存儲的可靠,為了保證優秀的數據讀寫性能,我們需要分布式存儲技術

5、業務如此復雜,為了公司的發展,業務能繼續擴大,就需要能更加精準的營銷和運營,我們還需要對數據進行實時、離線處理分析,此時,我們又得考慮分布式計算技術

6、在業務拆分后,整體架構出現了巨變,不可能再用以前集群方式的思維去考慮高可用,那么分布式的可靠性技術又要納入我們的掌握范疇。

二、分布式管理系統常用技術和應用場景

1、consistent hashing:一(yi)致性哈希,解決數據均衡分布問題。

2、vector clock:時鐘向(xiang)量,多版本數據修改。

3、Quorum W+R>N[with vector clock]:抽屜原理,數據(ju)一致性的(de)另(ling)一種(zhong)解決(jue)方案(an)。時鐘向量,多版本(ben)數據(ju)修改。

4、Merkle tree [with anti-entropy]:數據(ju)復制。

5、MVCC:copy-on-write與snapshot。

6、2PC/3PC:分布(bu)式(shi)事務(wu)。

7、Paxos:強一致性協議。

8、Symmetry and Decentralization:對(dui)(dui)(dui)稱(cheng)(cheng)性(xing)(xing)和(he)去中(zhong)心化。對(dui)(dui)(dui)稱(cheng)(cheng)性(xing)(xing)(symmetry)簡化了系統的配置(zhi)和(he)維護(hu),去中(zhong)心化是對(dui)(dui)(dui)對(dui)(dui)(dui)稱(cheng)(cheng)性(xing)(xing)的延伸,可以避免master單點,同時方便集群(qun)scale out。

9、Map-Reduce:分而(er)治(zhi)之;移動(dong)數據(ju)不(bu)如(ru)移動(dong)計(ji)算(suan)(suan)(suan)。將計(ji)算(suan)(suan)(suan)盡(jin)量調度到與存(cun)儲節點在(zai)同一臺(tai)物理(li)機器上的計(ji)算(suan)(suan)(suan)節點上進行,這(zhe)稱之為(wei)本地化(hua)(hua)計(ji)算(suan)(suan)(suan),本地化(hua)(hua)計(ji)算(suan)(suan)(suan)是計(ji)算(suan)(suan)(suan)調度的一種重要優(you)化(hua)(hua)。

10、Gossip協議:節點管理。

網站提醒和聲明
本站(zhan)(zhan)為(wei)注冊用戶提(ti)供(gong)信(xin)息(xi)存儲空間(jian)(jian)服(fu)務,非“MAIGOO編輯(ji)”、“MAIGOO榜單研究(jiu)員(yuan)”、“MAIGOO文章編輯(ji)員(yuan)”上傳提(ti)供(gong)的文章/文字均是(shi)注冊用戶自主發布上傳,不(bu)代表本站(zhan)(zhan)觀點(dian),版權歸原(yuan)作者所有(you)(you),如有(you)(you)侵權、虛假信(xin)息(xi)、錯誤信(xin)息(xi)或任何問題,請(qing)及時(shi)聯系我們,我們將在第一(yi)時(shi)間(jian)(jian)刪(shan)除或更正(zheng)。 申請刪除>> 糾錯>> 投訴侵權>> 網(wang)頁上相(xiang)關信息(xi)的知(zhi)識產權歸網(wang)站方所有(包(bao)括但不限于文(wen)字、圖(tu)片(pian)、圖(tu)表、著作權、商標權、為用(yong)戶提供的商業(ye)信息(xi)等),非經許可不得抄襲或使用(yong)。
提交說明: 快速提交發布>> 查看提交幫助>> 注冊登錄>>
發表評論
您還未登錄,依《網絡安全法》相關要求,請您登錄賬戶后再提交發布信息。點擊登錄>>如您還未注冊,可,感謝您的理解及支持!
最新評論
暫無評論