AVt天堂网 手机版,亚洲va久久久噜噜噜久久4399,天天综合亚洲色在线精品,亚洲一级Av无码毛片久久精品

當前位置:首頁 > 科技  > 軟件

這一次,徹底搞懵 CRDT

來源: 責編: 時間:2024-05-16 09:04:21 150觀看
導讀我是前端西瓜哥,今天我們來簡單入門一下 CRDT。CRDT 是什么?CRDT,全稱為 conflict-free replicated data type(無沖突復制數據類型),它是一種數據類型,或者說是方案,確保在網絡中的不同副本最后數據保持一致的,可以用協同編輯

lvR28資訊網——每日最新資訊28at.com

我是前端西瓜哥,今天我們來簡單入門一下 CRDT。lvR28資訊網——每日最新資訊28at.com

CRDT 是什么?

CRDT,全稱為 conflict-free replicated data type(無沖突復制數據類型),它是一種數據類型,或者說是方案,確保在網絡中的不同副本最后數據保持一致的,可以用協同編輯領域。lvR28資訊網——每日最新資訊28at.com

CRDT 在 2011 年在論文中被正式提出,雖相比 OT 算法(1989年)起步晚了很長的時間,但實現難度低很多,且出現了高性能的 CRDT 庫 Y.js,越來越多產品選擇使用 CRDT 來實現協同編輯功能。lvR28資訊網——每日最新資訊28at.com

CRDT 有以下特性:lvR28資訊網——每日最新資訊28at.com

每個客戶端可獨自操作副本,即支持并發,不需要和其他副本協同溝通。lvR28資訊網——每日最新資訊28at.com

這是一種樂觀復制(Optimistic replication)的策略。lvR28資訊網——每日最新資訊28at.com

各個副本可以獨立地在本地編輯,不用把更新提交到服務器,等待服務端返回最新的狀態,用這個新狀態覆蓋掉舊狀態。即可做到離線編輯,本地更新了狀態后再同步到服務端。lvR28資訊網——每日最新資訊28at.com

算法能夠自動地處理不一致的問題。lvR28資訊網——每日最新資訊28at.com

一個副本和另一個副本通常是不同的,當其他副本同步過來時,有可能會出現沖突(不一致)的地方,比如兩個副本同時刪除和新增一個元素。lvR28資訊網——每日最新資訊28at.com

這個需要 CRDT 算法使用特定的策略去自動處理,而不是像 git merge 那樣去手動處理沖突。lvR28資訊網——每日最新資訊28at.com

同一時刻不同副本的狀態可能不同,但同步后它們能最終收斂(converge),達到相同的狀態(最終一致性)。lvR28資訊網——每日最新資訊28at.com

CRDT 的類型

CRDT 主要分為兩大類型:Operation-based 和 State-based。lvR28資訊網——每日最新資訊28at.com

Operation-based

Operation-based CRDTs,基于操作的 CRDT。lvR28資訊網——每日最新資訊28at.com

副本進行同步時,只會把 新增的本地操作(operation) 發送出去。lvR28資訊網——每日最新資訊28at.com

另一個副本拿到這個 operation 會將其應用到自己的狀態上,operataion 需要滿足交換律(commutative)。lvR28資訊網——每日最新資訊28at.com

交換律,指的是交換運算順序,最后的結果不變。比如加法就滿足交換律,a+b 和 b+a 的結果是相等的。lvR28資訊網——每日最新資訊28at.com

operataion 之所以要滿足交換律,是因為網絡并不可知。lvR28資訊網——每日最新資訊28at.com

假設有兩個副本 a 和 b 要同步過來給其他副本,你不知道到底誰先到達。對于一些副本可能是先 a 后 b,另一些可能是先 b 后 a,我們需保證在不同順序下,結果是一致的。lvR28資訊網——每日最新資訊28at.com

通常我們是通過 Generator 函數生成新的 opreation,發送給其他副本,然后這些副本通過  Effector 函數應用這些副本。lvR28資訊網——每日最新資訊28at.com

因為交換律這個特性,Operation-based CRDTs 還有另一個名字 commutative replicated data types(CmRDTs)。lvR28資訊網——每日最新資訊28at.com

基于操作的 CRDT 的優點是, 傳輸的數據量較少。lvR28資訊網——每日最新資訊28at.com

State-based

State-based CRDTs,基于狀態的 CRDT。lvR28資訊網——每日最新資訊28at.com

一個副本進行同步時,會將 整個完整的本地狀態(state) 發送出去。另一個副本需要支持將其他副本進行合并(merge)的操作,這個 merge 方法需要滿足交換律、分配律,以及冪等性。lvR28資訊網——每日最新資訊28at.com

基于狀態的 CRDT 的問題是,在文檔很大時,需要傳輸大量的數據,會耗費大量的帶寬,且花費時間長。所有實際生產很少會使用它。lvR28資訊網——每日最新資訊28at.com

優點是實現更簡單,如果數據量不大,是可以考慮使用的。lvR28資訊網——每日最新資訊28at.com

State-based CRDTs 同樣也有另一個名字:Convergent Replicated Data Types(CvRDTs)。Convergent 是收斂的意思。lvR28資訊網——每日最新資訊28at.com

一些 CRDT

CRDT 做到數據最終一致性,是基于數學上的特性來保證的。lvR28資訊網——每日最新資訊28at.com

我們來看幾個簡單的 CRDT 模型。lvR28資訊網——每日最新資訊28at.com

AWSet

AWSet(Add-wins set),一種新增優先于刪除的集合數據結構。lvR28資訊網——每日最新資訊28at.com

假如剛開始的時候,副本 A 和 副本 B 的狀態是一致的,有一個 a 在集合中。lvR28資訊網——每日最新資訊28at.com

副本 A 刪除了 a,然后再新增 a。lvR28資訊網——每日最新資訊28at.com

副本 B 刪除了 a。lvR28資訊網——每日最新資訊28at.com

副本 A 的新增 a 和 副本 B 的刪除 a 同時發生。lvR28資訊網——每日最新資訊28at.com

此時我們會選擇新增,忽略刪除,最后兩個副本的狀態還是 a 在集合中。lvR28資訊網——每日最新資訊28at.com

lvR28資訊網——每日最新資訊28at.com

為判斷兩個操作是否是 “同時” 的,我們會附加一個和時序相關的元數據,比如時間戳、版本向量。lvR28資訊網——每日最新資訊28at.com

RWSet

RWSet(Remove-win set),一種刪除優先新增的集合數據結構。lvR28資訊網——每日最新資訊28at.com

AWSet 類似,但對于并發的操作,會保留刪除,丟棄新增。lvR28資訊網——每日最新資訊28at.com

LWW

LWW(Last-writer-wins),最后寫入者優先。lvR28資訊網——每日最新資訊28at.com

所有的操作會有一個時間戳元數據,副本會對比同步操作的時間戳。lvR28資訊網——每日最新資訊28at.com

如果大于當前狀態時間戳,覆蓋掉原來的狀態;如果小于當前狀態時間戳,則忽略。lvR28資訊網——每日最新資訊28at.com

2P-Set

Two-Phase Set。lvR28資訊網——每日最新資訊28at.com

此模型會維護兩個集合,一個是新增集合,保存新增的元素,另一個是刪除集合,保存被刪除的元素。lvR28資訊網——每日最新資訊28at.com

模型的最終狀態為新增集合和刪除集合的差集。lvR28資訊網——每日最新資訊28at.com

另外,集合比較特殊,它是只增集合(grow-only set),只能往集合里加元素,不能從集合里移除元素。lvR28資訊網——每日最新資訊28at.com

這意味著一個元素如果被刪除了,就再也不能添加回來。所以刪除集合也被叫做 tombstone set(墓碑集合),人噶不能復生。lvR28資訊網——每日最新資訊28at.com

2P-Set 也算是一種 RW-Set(刪除優先),特別的點在于元素被刪除后不能新增回來。lvR28資訊網——每日最新資訊28at.com

G-Counter

G-Counter,Grow-only Counter,只增計數器,一個只能增加計數的計數器。lvR28資訊網——每日最新資訊28at.com

此模型使用 n 個節點的容器(一個整數數組),每個副本會分配一個 id,某個副本給計數器 +1,其實就會給對應的數組元素 +1。lvR28資訊網——每日最新資訊28at.com

計數器的值為數組的求和。lvR28資訊網——每日最新資訊28at.com

PN-Counter

PN-Counter,Positive-Negative Counter,一個支持增減的計數器。lvR28資訊網——每日最新資訊28at.com

多個 CRDT 可以組合成一個更復雜的 CRDT。lvR28資訊網——每日最新資訊28at.com

類似 G-Counter,但 PN-Counter 使用兩個 G-Counter,一個保存新增數(新增操作),另一個保存減少數(減少操作)。lvR28資訊網——每日最新資訊28at.com

計數器的值為新增數組求和減去減少數組的和。lvR28資訊網——每日最新資訊28at.com

YATA

最后我們看看復雜點的,簡單介紹一下 Y.js 的 YATA(Yet Another Transformation Approach)模型。lvR28資訊網——每日最新資訊28at.com

假設我們有值為 "ABCD" 的字符串。lvR28資訊網——每日最新資訊28at.com

YATA 模型會將其拆分成一個個字符,加上元數據,然后按順序首尾相連組成一個雙鏈表。lvR28資訊網——每日最新資訊28at.com

// 大概這樣子{  id: '2:0', // 客戶端 ID + clock ID  val: 'B',  left: a, // 當前節點的左節點  right: c, // 右節點  origin: a, // 節點創建時的左節點  rightOrigin: c // 節點創建時的右節點}

操作有 “插入” 和 “刪除”。lvR28資訊網——每日最新資訊28at.com

假設本地在 AB 之間插入 E,此時沒有發送同步,然后收到其他副本傳過來的 F,也是要插入到 AB 之間。lvR28資訊網——每日最新資訊28at.com

此時 E 和 F 是沖突的,我們會對唯一的 id(某種意義上的時間戳)使用特定的規則來決定先后順序。lvR28資訊網——每日最新資訊28at.com

至于刪除操作,因為插入操作需要找到在左右節點的位置,所以節點即使被刪除了也是不能從雙鏈表中移出的。lvR28資訊網——每日最新資訊28at.com

對此,YATA 選擇使用墓碑機制。YATA 將對應節點標記為刪除(item.deleted 設置為 true),并將節點記錄到刪除集合 DeleteSet 里。lvR28資訊網——每日最新資訊28at.com

這里其實可以看到,CRDT 通常是需要加很多元數據的,尤其是復雜數據結構且數據量較大的場景,所以這也是 CRDT 起初被詬病占用內存高的原因。lvR28資訊網——每日最新資訊28at.com

但 Y.js 通過一系列手段(比如將多個節點合并為一個大節點),將性能優化到足夠面對大多數場景,證明了用 CRDT 是做協同編輯的是不用擔心性能問題的,如果有,一定是你沒優化好。lvR28資訊網——每日最新資訊28at.com

結尾

本文只是簡單介紹一些 CRDT 是什么,并感受了一些簡單的 CRDT 模型,希望對你有所幫助。lvR28資訊網——每日最新資訊28at.com

本文鏈接:http://www.tebozhan.com/showinfo-26-88328-0.html這一次,徹底搞懵 CRDT

聲明:本網頁內容旨在傳播知識,若有侵權等問題請及時與本網聯系,我們將在第一時間刪除處理。郵件:2376512515@qq.com

上一篇: PlantUML畫時序圖,真香!

下一篇: 什么鎖比讀寫鎖性能更高?

標簽:
  • 熱門焦點
  • K60至尊版剛預熱 一加Ace2 Pro正面硬剛

    Redmi這邊剛如火如荼的宣傳了K60 Ultra的各種技術和硬件配置,作為競品的一加也坐不住了。一加中國區總裁李杰發布了兩條微博,表示在自家的一加Ace2上早就已經采用了和PixelWo
  • 小米平板5 Pro 12.4簡評:多專多能 兼顧影音娛樂的大屏利器

    疫情帶來了網課,網課盤活了安卓平板,安卓平板市場雖然中途停滯了幾年,但好的一點就是停滯的這幾年行業又有了新的發展方向,例如超窄邊框、高刷新率、多攝鏡頭組合等,這就讓安卓
  • 5月安卓手機好評榜:魅族20 Pro奪冠

    性能榜和性價比榜之后,我們來看最后的安卓手機好評榜,數據來源安兔兔評測,收集時間2023年5月1日至5月31日,僅限國內市場。第一名:魅族20 Pro好評率:97.50%不得不感慨魅族老品牌還
  • 8月總票房已突破10億!《封神》第一:口碑已經成了

    8月5日消息,據燈塔專業版數據,截至8月5日9時35分,8月總票房(含預售)已突破10億。其中,《封神》以大比分的優勢領先。根據官方消息,目前該片總票房已經超過14.
  • 多線程開發帶來的問題與解決方法

    使用多線程主要會帶來以下幾個問題:(一)線程安全問題  線程安全問題指的是在某一線程從開始訪問到結束訪問某一數據期間,該數據被其他的線程所修改,那么對于當前線程而言,該線程
  • 零售大模型“干中學”,攀爬數字化珠峰

    文/侯煜編輯/cc來源/華爾街科技眼對于絕大多數登山愛好者而言,攀爬珠穆朗瑪峰可謂終極目標。攀登珠峰的商業路線有兩條,一是尼泊爾境內的南坡路線,一是中國境內的北坡路線。相
  • Temu起訴SHEIN,跨境電商戰事升級

    來源 | 伯虎財經(bohuFN)作者 | 陳平安日前據外媒報道,拼多多旗下跨境電商平臺Temu正對競爭對手SHEIN提起新訴訟,訴狀稱Shein“利用市場支配力量強迫服裝廠商與之簽訂獨家
  • 猿輔導與新東方的兩種“歸途”

    作者|卓心月 出品|零態LT(ID:LingTai_LT)如何成為一家偉大企業?答案一定是對“勢”的把握,這其中最關鍵的當屬對企業戰略的制定,且能夠站在未來看現在,即使這其中的
  • 2299元起!iQOO Pad開啟預售:性能最強天璣平板

    5月23日,iQOO如期舉行了新品發布會,除了首發安卓最強旗艦處理器的iQOO Neo8系列新機外,還在發布會上推出了旗下首款平板電腦——iQOO Pad,其搭載了天璣
Top