本文轉(zhuǎn)載自微信公眾號(hào)「 三太子敖丙」，轉(zhuǎn)載本文請(qǐng)聯(lián)系 三太子敖丙公眾號(hào)。

前言

Zab(Zookeeper Atomic Broadcast)是為ZooKeeper協(xié)設(shè)計(jì)的崩潰恢復(fù)原子廣播協(xié)議，它保證zookeeper集群數(shù)據(jù)的一致性和命令的全局有序性。

[[326662]]

概念介紹

在介紹zab協(xié)議之前首先要知道zookeeper相關(guān)的幾個(gè)概念，才能更好的了解zab協(xié)議。

• 集群角色

1. Leader：同一時(shí)間集群總只允許有一個(gè)Leader，提供對(duì)客戶端的讀寫(xiě)功能，負(fù)責(zé)將數(shù)據(jù)同步至各個(gè)節(jié)點(diǎn);
2. Follower：提供對(duì)客戶端讀功能，寫(xiě)請(qǐng)求則轉(zhuǎn)發(fā)給Leader處理，當(dāng)Leader崩潰失聯(lián)之后參與Leader選舉;
3. Observer：與Follower不同的是但不參與Leader選舉。

• 服務(wù)狀態(tài)

1. LOOKING：當(dāng)節(jié)點(diǎn)認(rèn)為群集中沒(méi)有Leader，服務(wù)器會(huì)進(jìn)入LOOKING狀態(tài)，目的是為了查找或者選舉Leader;
2. FOLLOWING：follower角色;
3. LEADING：leader角色;
4. OBSERVING：observer角色;

可以知道Zookeeper是通過(guò)自身的狀態(tài)來(lái)區(qū)分自己所屬的角色，來(lái)執(zhí)行自己應(yīng)該的任務(wù)。

• ZAB狀態(tài)Zookeeper還給ZAB定義的4中狀態(tài)，反應(yīng)Zookeeper從選舉到對(duì)外提供服務(wù)的過(guò)程中的四個(gè)步驟。狀態(tài)枚舉定義：

public enum ZabState { 
        ELECTION, 
        DISCOVERY, 
        SYNCHRONIZATION, 
        BROADCAST 
    } 

1. ELECTION: 集群進(jìn)入選舉狀態(tài)，此過(guò)程會(huì)選出一個(gè)節(jié)點(diǎn)作為leader角色;
2. DISCOVERY：連接上leader，響應(yīng)leader心跳，并且檢測(cè)leader的角色是否更改，通過(guò)此步驟之后選舉出的leader才能執(zhí)行真正職務(wù);
3. SYNCHRONIZATION：整個(gè)集群都確認(rèn)leader之后，將會(huì)把leader的數(shù)據(jù)同步到各個(gè)節(jié)點(diǎn)，保證整個(gè)集群的數(shù)據(jù)一致性;
4. BROADCAST：過(guò)渡到廣播狀態(tài)，集群開(kāi)始對(duì)外提供服務(wù)。

• ZXID

Zxid是極為重要的概念，它是一個(gè)long型(64位)整數(shù)，分為兩部分：紀(jì)元(epoch)部分和計(jì)數(shù)器(counter)部分，是一個(gè)全局有序的數(shù)字。

epoch代表當(dāng)前集群所屬的哪個(gè)leader，leader的選舉就類似一個(gè)朝代的更替，你前朝的劍不能斬本朝的官，用epoch代表當(dāng)前命令的有效性，counter是一個(gè)遞增的數(shù)字。

選舉

基礎(chǔ)概念介紹完了，下面開(kāi)始介紹zab協(xié)議是怎么支持leader選舉的。

進(jìn)行l(wèi)eader有三個(gè)問(wèn)題，什么時(shí)候進(jìn)行?選舉規(guī)則?選擇流程?

下面我會(huì)一一解答這三個(gè)問(wèn)題：

1.選舉發(fā)生的時(shí)機(jī)Leader發(fā)生選舉有兩個(gè)時(shí)機(jī)，一個(gè)是服務(wù)啟動(dòng)的時(shí)候當(dāng)整個(gè)集群都沒(méi)有l(wèi)eader節(jié)點(diǎn)會(huì)進(jìn)入選舉狀態(tài)，如果leader已經(jīng)存在就會(huì)告訴該節(jié)點(diǎn)leader的信息，自己連接上leader，整個(gè)集群不用進(jìn)入選舉狀態(tài)。

還有一個(gè)就是在服務(wù)運(yùn)行中，可能會(huì)出現(xiàn)各種情況，服務(wù)宕機(jī)、斷電、網(wǎng)絡(luò)延遲很高的時(shí)候leader都不能再對(duì)外提供服務(wù)了，所有當(dāng)其他幾點(diǎn)通過(guò)心跳檢測(cè)到leader失聯(lián)之后，集群也會(huì)進(jìn)入選舉狀態(tài)。

2.選舉規(guī)則進(jìn)入投票選舉流程，怎么才能選舉出leader?或者說(shuō)按照什么規(guī)則來(lái)讓其他節(jié)點(diǎn)都能選舉你當(dāng)leader。

3.zab協(xié)議是按照幾個(gè)比較規(guī)則來(lái)進(jìn)行投票的篩選，如果你的票比我更好，就修改自身的投票信息，改投你當(dāng)leader。

下面代碼是zookeeper投票比較規(guī)則：

/* 
         * We return true if one of the following three cases hold: 
         * 1- New epoch is higher 
         * 2- New epoch is the same as current epoch, but new zxid is higher 
         * 3- New epoch is the same as current epoch, new zxid is the same 
         *  as current zxid, but server id is higher. 
         */ 
 
        return ((newEpoch > curEpoch) 
                || ((newEpoch == curEpoch) 
                    && ((newZxid > curZxid) 
                        || ((newZxid == curZxid) 
                            && (newId > curId))))); 

當(dāng)其他節(jié)點(diǎn)的紀(jì)元比自身高投它，如果紀(jì)元相同比較自身的zxid的大小，選舉zxid大的節(jié)點(diǎn)，這里的zxid代表節(jié)點(diǎn)所提交事務(wù)最大的id，zxid越大代表該節(jié)點(diǎn)的數(shù)據(jù)越完整。

最后如果epoch和zxid都相等，則比較服務(wù)的serverId，這個(gè)Id是配置zookeeper集群所配置的，所以我們配置zookeeper集群的時(shí)候可以把服務(wù)性能更高的集群的serverId配置大些，讓性能好的機(jī)器擔(dān)任leader角色。

選舉流程

時(shí)機(jī)和規(guī)則都有了，下面就是leader的選舉流程：

• 所有節(jié)點(diǎn)第一票先選舉自己當(dāng)leader，將投票信息廣播出去;
• 從隊(duì)列中接受投票信息;
• 按照規(guī)則判斷是否需要更改投票信息，將更改后的投票信息再次廣播出去;
• 判斷是否有超過(guò)一半的投票選舉同一個(gè)節(jié)點(diǎn)，如果是選舉結(jié)束根據(jù)投票結(jié)果設(shè)置自己的服務(wù)狀態(tài)，選舉結(jié)束，否則繼續(xù)進(jìn)入投票流程。

舉例

上圖來(lái)自《ZooKeeper：分布式過(guò)程協(xié)同技術(shù)詳解》，整體流程還是比較簡(jiǎn)單，這里就不具體分析了。

廣播

集群在經(jīng)過(guò)leader選舉之后還會(huì)有連接leader和同步兩個(gè)步驟，這里就不具體分析這兩個(gè)步驟的流程了，主要介紹集群對(duì)外提供服務(wù)如何保證各個(gè)節(jié)點(diǎn)數(shù)據(jù)的一致性。

zab在廣播狀態(tài)中保證以下特征

• 可靠傳遞: 如果消息m由一臺(tái)服務(wù)器傳遞，那么它最終將由所有服務(wù)器傳遞。
• 全局有序: 如果一個(gè)消息a在消息b之前被一臺(tái)服務(wù)器交付，那么所有服務(wù)器都交付了a和b，并且a先于b。
• 因果有序: 如果消息a在因果上先于消息b并且二者都被交付，那么a必須排在b之前。

有序性是zab協(xié)議必須要保證的一個(gè)很重要的屬性，因?yàn)閦ookeeper是以類似目錄結(jié)構(gòu)的數(shù)據(jù)結(jié)構(gòu)存儲(chǔ)數(shù)據(jù)的，必須要求命名的有序性。

比如一個(gè)命名a創(chuàng)建路徑為/test，然后命名b創(chuàng)建路徑為/test/123，如果不能保證有序性b命名在a之前，b命令會(huì)因?yàn)楦腹?jié)點(diǎn)不存在而創(chuàng)建失敗。

如上圖所示，整個(gè)寫(xiě)請(qǐng)求類似一個(gè)二階段的提交。

當(dāng)收到客戶端的寫(xiě)請(qǐng)求的時(shí)候會(huì)經(jīng)歷以下幾個(gè)步驟：

1. Leader收到客戶端的寫(xiě)請(qǐng)求，生成一個(gè)事務(wù)(Proposal)，其中包含了zxid;
2. Leader開(kāi)始廣播該事務(wù)，需要注意的是所有節(jié)點(diǎn)的通訊都是由一個(gè)FIFO的隊(duì)列維護(hù)的;
3. Follower接受到事務(wù)之后，將事務(wù)寫(xiě)入本地磁盤(pán)，寫(xiě)入成功之后返回Leader一個(gè)ACK;
4. Leader收到過(guò)半的ACK之后，開(kāi)始提交本事務(wù)，并廣播事務(wù)提交信息
5. 從節(jié)點(diǎn)開(kāi)始提交本事務(wù)。

有以上流程可知，zookeeper通過(guò)二階段提交來(lái)保證集群中數(shù)據(jù)的一致性，因?yàn)橹恍枰盏竭^(guò)半的ACK就可以提交事務(wù)，所以zookeeper的數(shù)據(jù)并不是強(qiáng)一致性。

zab協(xié)議的有序性保證是通過(guò)幾個(gè)方面來(lái)體現(xiàn)的，第一是，服務(wù)之前用TCP協(xié)議進(jìn)行通訊，保證在網(wǎng)絡(luò)傳輸中的有序性;第二，節(jié)點(diǎn)之前都維護(hù)了一個(gè)FIFO的隊(duì)列，保證全局有序性;第三，通過(guò)全局遞增的zxid保證因果有序性。

狀態(tài)流轉(zhuǎn)

前面介紹了zookeeper服務(wù)狀態(tài)有四種，ZAB狀態(tài)也有四種。這里就簡(jiǎn)單介紹一個(gè)他們之間的狀態(tài)流轉(zhuǎn)，更能加深對(duì)zab協(xié)議在zookeeper工作流程中的作用。

1. 服務(wù)在啟動(dòng)或者和leader失聯(lián)之后服務(wù)狀態(tài)轉(zhuǎn)為L(zhǎng)OOKING;
2. 如果leader不存在選舉leader，如果存在直接連接leader，此時(shí)zab協(xié)議狀態(tài)為ELECTION;
3. 如果有超過(guò)半數(shù)的投票選擇同一臺(tái)server，則leader選舉結(jié)束，被選舉為leader的server服務(wù)狀態(tài)為L(zhǎng)EADING，其他server服務(wù)狀態(tài)為FOLLOWING/OBSERVING;
4. 所有server連接上leader，此時(shí)zab協(xié)議狀態(tài)為DISCOVERY;
5. leader同步數(shù)據(jù)給learner，使各個(gè)從節(jié)點(diǎn)數(shù)據(jù)和leader保持一致，此時(shí)zab協(xié)議狀態(tài)為SYNCHRONIZATION;
6. 同步超過(guò)一半的server之后，集群對(duì)外提供服務(wù)，此時(shí)zab狀態(tài)為BROADCAST。

可以知道整個(gè)zookeeper服務(wù)的工作流程類似一個(gè)狀態(tài)機(jī)的轉(zhuǎn)換，而zab協(xié)議就是驅(qū)動(dòng)服務(wù)狀態(tài)流轉(zhuǎn)的關(guān)鍵，理解了zab就理解了zookeeper工作的關(guān)鍵原理

總結(jié)

本文對(duì)zab協(xié)議在zookeeper的工作流程中做了簡(jiǎn)單的介紹，希望對(duì)大家理解學(xué)習(xí)zookeeper有所幫助。

我是敖丙，一個(gè)在互聯(lián)網(wǎng)茍且偷生的工具人。