【正文】 制有多種實(shí)現(xiàn)方式，各有利弊。由于在線容災(zāi)可以實(shí)現(xiàn)數(shù)據(jù)的實(shí)時(shí)復(fù)制，因此，數(shù)據(jù)恢復(fù)的RTO和RPO都可以滿足用戶的高要求。因此，數(shù)據(jù)重要性很高的用戶都應(yīng)選擇這種方式，比如金融行業(yè)的用戶。但要實(shí)現(xiàn)這種方式的容災(zāi)必須有很高的投入。容災(zāi)系統(tǒng)的體系架構(gòu)從容災(zāi)抗毀系統(tǒng)技術(shù)的不同實(shí)現(xiàn)層次角度來看，一個(gè)實(shí)用的容災(zāi)抗毀系統(tǒng)的體系結(jié)構(gòu)是影響系統(tǒng)工作效能的重要方面。一個(gè)典型的容災(zāi)系統(tǒng)的體系架構(gòu)如圖所示。本地?cái)?shù)據(jù)保護(hù)可以保證在一些本地的災(zāi)難發(fā)生的情況下，盡快地恢復(fù)業(yè)務(wù)數(shù)據(jù)，保證業(yè)務(wù)的正常運(yùn)行。本地容災(zāi)技術(shù)分為數(shù)據(jù)容災(zāi)和服務(wù)容災(zāi)。本地?cái)?shù)據(jù)容災(zāi)從技術(shù)上主要可分為：磁盤保護(hù)技術(shù)、快照數(shù)據(jù)保護(hù)技術(shù)、磁帶/磁盤數(shù)據(jù)備份技術(shù)。本地服務(wù)容災(zāi)從實(shí)現(xiàn)技術(shù)上主要可分為：雙機(jī)熱備和本地集群技術(shù)。本地?cái)?shù)據(jù)容災(zāi)通過對本地?cái)?shù)據(jù)進(jìn)行定時(shí)的備份手段，當(dāng)系統(tǒng)發(fā)生故障和人為錯誤時(shí)，可以將備份數(shù)據(jù)恢復(fù)，從而保證了本地?cái)?shù)據(jù)的安全性。當(dāng)然系統(tǒng)服務(wù)的暫時(shí)停頓不可避免。單純的數(shù)據(jù)容災(zāi)已不能滿足人們對關(guān)鍵業(yè)務(wù)不間斷提供服務(wù)的需求，因此，服務(wù)容災(zāi)目前成為應(yīng)用熱點(diǎn)。本地服務(wù)容災(zāi)通過配置多機(jī)環(huán)境，達(dá)到提高信息系統(tǒng)的高可用性，抗御單點(diǎn)故障的目的。一旦系統(tǒng)發(fā)生局部的故障和人為錯誤，比如，操作系統(tǒng)故障、網(wǎng)絡(luò)故障、掉電等，本地服務(wù)容災(zāi)系統(tǒng)可以在用戶不可覺察的最短時(shí)間內(nèi)迅速接替故障系統(tǒng)，使系統(tǒng)應(yīng)用繼續(xù)運(yùn)行，確保系統(tǒng)服務(wù)的連續(xù)性。本地服務(wù)容災(zāi)典型的實(shí)現(xiàn)方式是采用雙機(jī)熱備技術(shù)。這種方式是指采用兩臺服務(wù)器進(jìn)行冗余容錯，將兩臺服務(wù)器分為主從服務(wù)器，在正常情況下，主服務(wù)器提供服務(wù)，從服務(wù)器保持和主服務(wù)器的一致。當(dāng)主服務(wù)器出現(xiàn)故障時(shí)，從服務(wù)器立即接替主服務(wù)器的工作，從而使得一臺服務(wù)器出現(xiàn)故障不會造成整個(gè)系統(tǒng)的崩潰。實(shí)際應(yīng)用時(shí)，也可以采用兩臺服務(wù)器互為熱備。該項(xiàng)技術(shù)的最新發(fā)展是采用本地集群技術(shù)，即完成多機(jī)相互鏡像，負(fù)載均衡，應(yīng)用切換功能，保障關(guān)鍵業(yè)務(wù)的高可用性。本地容災(zāi)的局限性本地容災(zāi)可以避免服務(wù)器單點(diǎn)故障對信息系統(tǒng)的打擊，提高系統(tǒng)的高可用性。但是，當(dāng)發(fā)生區(qū)域性、毀滅性的災(zāi)難時(shí)，如火災(zāi)、爆炸、地震、水災(zāi)、戰(zhàn)爭、雷擊等，單純的本地容災(zāi)無法保障系統(tǒng)的高可用性，導(dǎo)致正常業(yè)務(wù)無法進(jìn)行、重要數(shù)據(jù)丟失、破壞，造成的損失將不可估量。因此，全面的異地容災(zāi)保護(hù)解決方案應(yīng)運(yùn)而生。異地系統(tǒng)容災(zāi)通過物理距離將生產(chǎn)中心與容災(zāi)中心絕對隔離開，這樣可以預(yù)防區(qū)域性、毀滅性的災(zāi)難。本地?cái)?shù)據(jù)備份是容災(zāi)系統(tǒng)建設(shè)的前提基礎(chǔ)，而通過對重要業(yè)務(wù)的遠(yuǎn)程異地容災(zāi)技術(shù)，從而增強(qiáng)數(shù)據(jù)中心的區(qū)域性抗打擊能力，保障數(shù)據(jù)安全及業(yè)務(wù)系統(tǒng)連續(xù)性，才能真正實(shí)現(xiàn)一個(gè)安全的關(guān)鍵業(yè)務(wù)信息系統(tǒng)。異地容災(zāi)技術(shù)按上述體系結(jié)構(gòu)分為3個(gè)層次數(shù)據(jù)容災(zāi)技術(shù)、網(wǎng)絡(luò)容災(zāi)技術(shù)、服務(wù)容災(zāi)技術(shù)。遠(yuǎn)程數(shù)據(jù)容災(zāi)是指通過將本地?cái)?shù)據(jù)在線備份到遠(yuǎn)離本地的異地?cái)?shù)據(jù)系統(tǒng)保存，當(dāng)災(zāi)難發(fā)生后，可以通過數(shù)據(jù)重構(gòu)，來達(dá)到抵御區(qū)域性、毀滅性災(zāi)難，保護(hù)業(yè)務(wù)數(shù)據(jù)的目的。但關(guān)鍵業(yè)務(wù)服務(wù)的暫時(shí)停頓不可避免。遠(yuǎn)程數(shù)據(jù)容災(zāi)技術(shù)可以分為如下幾類：（1）遠(yuǎn)程磁帶數(shù)據(jù)容災(zāi)技術(shù)；（2）基于智能存儲系統(tǒng)的數(shù)據(jù)容災(zāi)技術(shù)，（3）基于服務(wù)器卷的數(shù)據(jù)容災(zāi)技術(shù)；（4）基于文件系統(tǒng)的數(shù)據(jù)容災(zāi)技術(shù)；（5）基于數(shù)據(jù)庫的數(shù)據(jù)容災(zāi)技術(shù)。隨著網(wǎng)絡(luò)的飛速發(fā)展，越來越多的用戶將這一網(wǎng)絡(luò)作為提供協(xié)同工作、電子商務(wù)、教育和休閑娛樂的一條便捷途徑。如何防止業(yè)務(wù)中斷或者在中斷不可避免時(shí)將業(yè)務(wù)的損失降至最低成為一個(gè)關(guān)鍵問題，因此，網(wǎng)絡(luò)的可生存性成為網(wǎng)絡(luò)設(shè)計(jì)中必須考慮的一個(gè)方面。網(wǎng)絡(luò)生存性是指網(wǎng)絡(luò)在遭受各種故障，如通信人為故障和客觀因素導(dǎo)致的通信事故等時(shí)，仍能維持可接受的業(yè)務(wù)質(zhì)量的能力。按照網(wǎng)絡(luò)生存性性能工作組的定義，網(wǎng)絡(luò)生存性包括兩個(gè)方面：（1）網(wǎng)絡(luò)出現(xiàn)故障的情況下，通過各種恢復(fù)技術(shù)，來維持或恢復(fù)網(wǎng)絡(luò)服務(wù)使性能達(dá)到可接受的程度。（2）網(wǎng)絡(luò)通過應(yīng)用預(yù)防技術(shù)，從故障中減輕或預(yù)防服務(wù)失效。提高網(wǎng)絡(luò)可生存性的相關(guān)方案，有基于底層光網(wǎng)絡(luò)的技術(shù)，也有基于IP層的技術(shù)以及這些技術(shù)的融合。常見的網(wǎng)絡(luò)容災(zāi)技術(shù)有全光網(wǎng)絡(luò)可生存技術(shù)、SDH網(wǎng)絡(luò)可生存技術(shù)、IP層網(wǎng)絡(luò)可生存技術(shù)。一個(gè)全面的容災(zāi)抗毀系統(tǒng)不僅僅是提供數(shù)據(jù)級、網(wǎng)絡(luò)級的保護(hù)，它的一個(gè)重要功能就是為了保證信息系統(tǒng)的連續(xù)運(yùn)行，也即保證業(yè)務(wù)的高可用性，并向用戶提供不間斷的、可靠的服務(wù)。為了實(shí)現(xiàn)這個(gè)功能，當(dāng)發(fā)生災(zāi)難時(shí)，需要將生產(chǎn)中心的業(yè)務(wù)轉(zhuǎn)移到容災(zāi)中心去運(yùn)行，這就是服務(wù)容災(zāi)技術(shù)要解決的問題。服務(wù)容災(zāi)的另一個(gè)目的是保證服務(wù)的自動無縫遷移，讓用戶感覺不出提供服務(wù)的主體發(fā)生了變化。正常情況下，系統(tǒng)的各種應(yīng)用運(yùn)行在生產(chǎn)中心的信息系統(tǒng)上，生產(chǎn)中心數(shù)據(jù)闊步或異步地實(shí)時(shí)復(fù)制到容災(zāi)中心，數(shù)據(jù)同時(shí)存放在生產(chǎn)中心和容災(zāi)中心的存儲系統(tǒng)中。當(dāng)生產(chǎn)巾心由于斷電、火災(zāi)甚至地震等災(zāi)難無法正常工作時(shí)，則將業(yè)務(wù)處理、網(wǎng)絡(luò)通信線路切換至容災(zāi)中心，保證業(yè)務(wù)的連續(xù)運(yùn)行。因此，應(yīng)用級容災(zāi)需要建立一個(gè)同生產(chǎn)系統(tǒng)相一致的生產(chǎn)中心備份系統(tǒng)。在沒有發(fā)生災(zāi)難的情況F，由生產(chǎn)中心對外提供服務(wù)，容災(zāi)中心則實(shí)時(shí)跟蹤生產(chǎn)中心的處理，同時(shí)備份生產(chǎn)中心的相關(guān)信息，確保在災(zāi)難發(fā)生時(shí)，能將信息服務(wù)功能切換到容災(zāi)中心，實(shí)現(xiàn)生產(chǎn)中心的功能，抵御災(zāi)難。服務(wù)級容災(zāi)足在數(shù)據(jù)級容災(zāi)的基礎(chǔ)上，增加對整個(gè)服務(wù)的備份，使得投資較高，要求提供業(yè)務(wù)連續(xù)性的應(yīng)用平臺，數(shù)據(jù)、傳輸線路、基礎(chǔ)設(shè)施等所有環(huán)節(jié)的容災(zāi)備份，實(shí)現(xiàn)的技術(shù)要求高，難度大。因此，一般用于對、也務(wù)連續(xù)性要求很高的系統(tǒng)中，如金融銀行系統(tǒng)、電信營業(yè)帳務(wù)系統(tǒng)等。目前，己經(jīng)出現(xiàn)多種與服務(wù)容災(zāi)相關(guān)的技術(shù)，包括失效檢測技術(shù)、服務(wù)遷移技術(shù)。其中有代表性的失效檢測技術(shù)有心跳技術(shù)，主要的服務(wù)遷移技術(shù)包括基于DNS的服務(wù)遷移技術(shù)、基于IP重定向的服務(wù)遷移、基于集群的服務(wù)遷移。數(shù)據(jù)備份實(shí)現(xiàn)技術(shù)在生產(chǎn)中心和災(zāi)備中心的服務(wù)器上安裝專用的數(shù)據(jù)復(fù)制軟件，以實(shí)現(xiàn)遠(yuǎn)程復(fù)制功能。兩中心間必須有網(wǎng)絡(luò)連接作為數(shù)據(jù)通道?？梢栽诜?wù)器層增加應(yīng)用遠(yuǎn)程切換功能軟件，從而構(gòu)成完整的應(yīng)用級容災(zāi)方案。這種數(shù)據(jù)復(fù)制方式相對投入較少，主要是軟件的采購成本；兼容性較好，可以兼容不同品牌的服務(wù)器和存儲設(shè)備，較適合硬件組成復(fù)雜的用戶。但這種方式要在服務(wù)器上運(yùn)行軟件，會影響服務(wù)器性能。存儲交換機(jī)技術(shù)的發(fā)展使交換機(jī)可以實(shí)現(xiàn)更多的功能。很多原來由服務(wù)器和存儲變現(xiàn)的功能現(xiàn)在也可在交換機(jī)層實(shí)現(xiàn)，比如存儲虛擬化。同樣，現(xiàn)在有些廠家的交換機(jī)產(chǎn)品已經(jīng)可以實(shí)現(xiàn)復(fù)制功能。在生產(chǎn)中心和災(zāi)備中心都要部署這種交換機(jī)，并在交換機(jī)之間通過專用鏈路連接起來。由于交換機(jī)可以管理和復(fù)制的數(shù)據(jù)是存放在存賭層內(nèi)的，因此，用戶需要將生產(chǎn)數(shù)據(jù)都存儲在交換機(jī)所連接的存儲沒備中，這樣就可以實(shí)現(xiàn)交換機(jī)對數(shù)據(jù)的管理和復(fù)制。目前使用這種技術(shù)的產(chǎn)品還不是很多，成熟性還有待提高，具有這種功能的交換機(jī)價(jià)格也相對較高，所以采用這種方案的用戶比較少?，F(xiàn)在的存儲設(shè)備經(jīng)過多年的發(fā)展已經(jīng)十分成熟，特別足中高端產(chǎn)品，一般都具有先進(jìn)的數(shù)據(jù)管理功能。遠(yuǎn)程數(shù)據(jù)復(fù)制功能幾乎是現(xiàn)有中高端產(chǎn)品的必備功能。要實(shí)現(xiàn)數(shù)據(jù)的復(fù)制需要在生產(chǎn)中心和災(zāi)備中心都部署一套這樣的存儲系統(tǒng)，數(shù)據(jù)復(fù)制功能由存儲系統(tǒng)實(shí)現(xiàn)。如果距離比較近（幾十公里之內(nèi)），之間的鏈路可由兩中心的存儲交換機(jī)通過光纖直接連接；如果距離在200公里內(nèi)，可通過增加DWDM等設(shè)備直接進(jìn)行光纖連接l超過200公里，則可增加存儲路由器進(jìn)行協(xié)議轉(zhuǎn)換途徑WAN或Internet實(shí)現(xiàn)連接。因此，從理論上可實(shí)現(xiàn)無限制連接。在存儲層實(shí)現(xiàn)數(shù)據(jù)復(fù)制功能足很成熟的技術(shù)，而且對應(yīng)用服務(wù)器的性能基本沒有影響。在應(yīng)用層增加遠(yuǎn)程集群軟件后就可以實(shí)現(xiàn)自動災(zāi)難切換的整體容災(zāi)解決方案。目前，這種容災(zāi)方案穩(wěn)定性高、對服務(wù)器性能基本無影響，是容災(zāi)方案的主流選擇。結(jié)束語目前，隨著社會信息化步伐的不斷加快，人們對信息系統(tǒng)的容災(zāi)備份能JJ提出更高的要求。容災(zāi)技術(shù)岡此也日新月異。研究容災(zāi)技術(shù)，建立容災(zāi)系統(tǒng)的體系架構(gòu)，提高容災(zāi)系統(tǒng)性能，都是重要的研究方向。第三篇：分布式存儲系統(tǒng)設(shè)計(jì)方案——備份容災(zāi)分布式存儲系統(tǒng)設(shè)計(jì)方案——備份容災(zāi)在分布式存儲系統(tǒng)中，系統(tǒng)可用性是最重要的指標(biāo)之一，需要保證在機(jī)器發(fā)生故障時(shí)，系統(tǒng)可用性不受影響，為了做到這點(diǎn)，數(shù)據(jù)就需要保存多個(gè)副本，并且 多個(gè)副本要分布在不同的機(jī)器上，只要多個(gè)副本的數(shù)據(jù)是一致的，在機(jī)器故障引起某些副本失效時(shí)，其它副本仍然能提供服務(wù)。本文主要介紹數(shù)據(jù)備份的方式，以及 如何保證多個(gè)數(shù)據(jù)副本的一致性，在系統(tǒng)出現(xiàn)機(jī)器或網(wǎng)絡(luò)故障時(shí)，如何保持系統(tǒng)的高可用性。數(shù)據(jù)備份數(shù)據(jù)備份是指存儲數(shù)據(jù)的多個(gè)副本，備份方式可以分為熱備和冷備，熱備是指直接提供服務(wù)的備副本，或者在主副本失效時(shí)能立即提供服務(wù)的備副本，冷備是用于恢復(fù)數(shù)據(jù)的副本，一般通過Dump的方式生成。數(shù)據(jù)熱備按副本的分布方式可分為同構(gòu)系統(tǒng)和異步系統(tǒng)。同構(gòu)系統(tǒng)是把存儲節(jié)點(diǎn)分成若干組，每組節(jié)點(diǎn)存儲相同的數(shù)據(jù)，其中一個(gè)主節(jié)點(diǎn)，其他為備節(jié)點(diǎn)。異 構(gòu)系統(tǒng)是把數(shù)據(jù)劃分成很多分片，每個(gè)分片的多個(gè)副本分布在不同的存儲節(jié)點(diǎn)，存儲節(jié)點(diǎn)之間是異構(gòu)的，即每個(gè)節(jié)點(diǎn)存儲的數(shù)據(jù)分片集合都不相同。在同構(gòu)系統(tǒng)中，只有主節(jié)點(diǎn)提供寫服務(wù)，備節(jié)點(diǎn)只提供讀服務(wù)，每個(gè)主節(jié)點(diǎn)的備節(jié)點(diǎn)數(shù)可以不一樣，這樣在部署上會有更大的靈活性。在異構(gòu)系統(tǒng)中，所有節(jié)點(diǎn)都是可以提供寫服務(wù) 的，并且在某個(gè)節(jié)點(diǎn)發(fā)生故障時(shí)，會有多個(gè)節(jié)點(diǎn)參與故障節(jié)點(diǎn)的數(shù)據(jù)恢復(fù)，但這種方式需要比較多的元數(shù)據(jù)來確定各個(gè)分片的主副本所在的節(jié)點(diǎn)，數(shù)據(jù)同步機(jī)制也會 比較復(fù)雜。相比較而言，異構(gòu)系統(tǒng)能提供更好的寫性能，但實(shí)現(xiàn)比較復(fù)雜，而同構(gòu)系統(tǒng)架構(gòu)更簡單，部署上也更靈活。鑒于互聯(lián)網(wǎng)大部分業(yè)務(wù)場景具有寫少讀多的特 性，我們選擇了更易于實(shí)現(xiàn)的同構(gòu)系統(tǒng)的設(shè)計(jì)。系統(tǒng)數(shù)據(jù)備份的架構(gòu)如下圖所示，每個(gè)節(jié)點(diǎn)代表一臺物理機(jī)器，所有節(jié)點(diǎn)按數(shù)據(jù)分布劃分為多個(gè)組，每一組的主備節(jié)點(diǎn)存儲相同的數(shù)據(jù)，只有主節(jié)點(diǎn)能提供寫 服務(wù)，主節(jié)點(diǎn)負(fù)責(zé)把數(shù)據(jù)變更同步到所有的備節(jié)點(diǎn)，所有節(jié)點(diǎn)都能提供讀服務(wù)。主節(jié)點(diǎn)上會分布全量的數(shù)據(jù)，所以主節(jié)點(diǎn)的數(shù)量決定了系統(tǒng)能存儲的數(shù)據(jù)量，在系統(tǒng) 容量不足時(shí)，就需要擴(kuò)容主節(jié)點(diǎn)數(shù)量。在系統(tǒng)的處理能力上，如果是寫能力不足，只能通過擴(kuò)容主節(jié)點(diǎn)數(shù)來解決。而在寫能力不足時(shí)，則可以通過增加備節(jié)點(diǎn)來提 升。每個(gè)主節(jié)點(diǎn)擁有的備節(jié)點(diǎn)數(shù)量可以不一樣，這在各個(gè)節(jié)點(diǎn)的數(shù)據(jù)熱度不一樣時(shí)特別有用，可以通過給比較熱的節(jié)點(diǎn)增加更多的備節(jié)點(diǎn)實(shí)現(xiàn)用更少的資源來提升系 統(tǒng)的處理能力。同步機(jī)制在上面的備份架構(gòu)中，每個(gè)分組只有主節(jié)點(diǎn)接收寫請求，然后由主節(jié)點(diǎn)負(fù)責(zé)把數(shù)據(jù)同步到所有的備節(jié)點(diǎn)，如下圖所示，主節(jié)點(diǎn)采用一對多的方式進(jìn)行同步，相 對于級聯(lián)的方式，這種方式在某個(gè)備節(jié)點(diǎn)故障時(shí)，不會影響其它備節(jié)點(diǎn)的同步。在CAP理論中，可用性和一致性是一對矛盾體，在這里主節(jié)點(diǎn)執(zhí)行寫操作后會立即 回復(fù)客戶端，然后再異步同步數(shù)據(jù)到備節(jié)點(diǎn)，這樣并不能保證主備節(jié)點(diǎn)的數(shù)據(jù)強(qiáng)一致性，主備數(shù)據(jù)會有短暫的不一致，通過犧牲一定的一致性來保證系統(tǒng)的可用性。在這種機(jī)制下，客戶端可能在備節(jié)點(diǎn)讀到老數(shù)據(jù)，如果業(yè)務(wù)要求數(shù)據(jù)強(qiáng)一致性，則可以在讀請求中設(shè)置只讀主選項(xiàng)，這樣讀請求就會被接口層轉(zhuǎn)發(fā)到主節(jié)點(diǎn)，這種情 況下備節(jié)點(diǎn)只用于容災(zāi)，不提供服務(wù)。為了保證主備節(jié)點(diǎn)的數(shù)據(jù)一致性，需要一種高效可靠的數(shù)據(jù)同步機(jī)制。同步分為增量同步和全量同步，增量同步是主節(jié)點(diǎn)把寫請求直接轉(zhuǎn)發(fā)到備節(jié)點(diǎn)執(zhí)行，全量同步是主節(jié)點(diǎn)把本地的數(shù)據(jù)發(fā)到備節(jié)點(diǎn)進(jìn)行覆蓋。接下來詳細(xì)介紹同步機(jī)制的實(shí)現(xiàn)，同步的整體流程如下圖所示。系統(tǒng)中數(shù)據(jù)分片的單位是一致性哈希環(huán)中的VNode(虛擬節(jié)點(diǎn))，每個(gè)VNode有一個(gè)自增的同步序列號SyncSeq，VNode中所包含的數(shù)據(jù) 的每一個(gè)寫操作都會觸發(fā)它的SyncSeq進(jìn)行自增，這樣在每個(gè)VNode內(nèi)SyncSeq就標(biāo)識了每一次寫操作，并且SyncSeq的大小也反映了寫操 作的執(zhí)行順序。數(shù)據(jù)的每次寫操作除了修改數(shù)據(jù)，還會保存寫操作對應(yīng)的SyncSeq，后面可以看到，SyncSeq是同步機(jī)制可靠性的基礎(chǔ)。主節(jié)點(diǎn)的寫進(jìn)程收到寫請求后，先修改數(shù)據(jù)，把當(dāng)前VNode的SyncSeq加1并更新到數(shù)據(jù)中。接下來會記錄Binlog，Binlog是一個(gè)三元組主備節(jié)點(diǎn)的數(shù)據(jù)同步由主節(jié)點(diǎn)上的同步進(jìn)程異步進(jìn)行，通過掃描上圖的同步進(jìn)度表中主備節(jié)點(diǎn)的SyncSeq差異就可知備節(jié)點(diǎn)需要同步哪些數(shù)據(jù)。同步進(jìn)程通過同步進(jìn)度表確定需要同步的二元組接下來介紹一下同步協(xié)議如何保證同步的高效和可靠。為了讓同步包嚴(yán)格按照主節(jié)點(diǎn)的發(fā)送順序到達(dá)備節(jié)點(diǎn)，采用TCP協(xié)議進(jìn)行同步，在主節(jié)點(diǎn)的每個(gè) VNode上到每一個(gè)備節(jié)點(diǎn)建立一個(gè)TCP連接，記為一個(gè)同步連接。在每一個(gè)同步連接上，主節(jié)點(diǎn)會一次性批量發(fā)送多個(gè)同步包，備節(jié)點(diǎn)也會記錄已同步的 SyncSeq，對每一個(gè)同步包會檢查攜帶的SyncSeq是否符合預(yù)期，如果符合預(yù)