freepeople性欧美熟妇, 色戒完整版无删减158分钟hd, 无码精品国产vα在线观看DVD, 丰满少妇伦精品无码专区在线观看,艾栗栗与纹身男宾馆3p50分钟,国产AV片在线观看,黑人与美女高潮,18岁女RAPPERDISSSUBS,国产手机在机看影片

正文內(nèi)容

云環(huán)境下存儲(chǔ)技術(shù)的研究畢業(yè)設(shè)計(jì)(編輯修改稿)

2025-07-16 01:22 本頁面
 

【文章內(nèi)容簡(jiǎn)介】 操作、文件訪問、文件訪問控制等功能。目前的分布式文件系統(tǒng)存儲(chǔ)的實(shí)現(xiàn)有軟硬件一體和軟硬件分離兩種方式。(3)分布式對(duì)象存儲(chǔ)對(duì)象存儲(chǔ)引入對(duì)象元數(shù)據(jù)來描述對(duì)象特征,對(duì)象元數(shù)據(jù)具有豐富的語義,支持?jǐn)?shù)據(jù)的并發(fā)讀寫,一般不支持?jǐn)?shù)據(jù)的隨機(jī)寫操作。對(duì)象存儲(chǔ)技術(shù)相對(duì)成熟,對(duì)底層硬件要求不高,存儲(chǔ)系統(tǒng)可靠性和容錯(cuò)通過軟件實(shí)現(xiàn),同時(shí)其訪問接口簡(jiǎn)單,適合處理海量、小數(shù)據(jù)的非結(jié)構(gòu)化數(shù)據(jù),如:郵箱、網(wǎng)盤、相冊(cè)、音頻視頻存儲(chǔ)等。(4)分布式表存儲(chǔ)表結(jié)構(gòu)存儲(chǔ)是一種結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ),與傳統(tǒng)數(shù)據(jù)庫相比,它提供的表空間訪問功能受限,但更強(qiáng)調(diào)系統(tǒng)的可擴(kuò)展性。提供表存儲(chǔ)的云存儲(chǔ)系統(tǒng)的特征就是同時(shí)提供高并發(fā)的數(shù)據(jù)訪問性能和可伸縮的存儲(chǔ)和計(jì)算架構(gòu)。提供表存儲(chǔ)的云存儲(chǔ)系統(tǒng)有兩類接口訪問方式:一類是標(biāo)準(zhǔn)的SQL數(shù)據(jù)庫接口,一類是Mapreduce的數(shù)據(jù)庫應(yīng)用處理接口。前者目前以開源技術(shù)為主,尚未有成熟的商業(yè)軟件,后者已有商業(yè)軟件和成功的商業(yè)應(yīng)用案例。 數(shù)據(jù)備份技術(shù)典型的用戶備份流程是這樣的:每天都要在凌晨進(jìn)行一次增量備份,然后每周末凌晨進(jìn)行全備份。采用這種方法,一旦出現(xiàn)了數(shù)據(jù)災(zāi)難,用戶可以恢復(fù)到某天(注意是以天為單位的)的數(shù)據(jù),因此在最壞的情況下,可能丟失整整一天的數(shù)據(jù)。該備份策略在備份的數(shù)據(jù)量很大的情況下,備份時(shí)間窗口很大,需要繁忙的業(yè)務(wù)系統(tǒng)停機(jī)很長(zhǎng)時(shí)間才能做到。因此,為了確保數(shù)據(jù)的更高安全性,用戶必須對(duì)在線系統(tǒng)實(shí)行在線實(shí)時(shí)復(fù)制,盡可能多地采用快照等磁盤管理技術(shù)維持?jǐn)?shù)據(jù)的高可用性,這樣勢(shì)必需要增加很大一部分投資。 副本數(shù)據(jù)布局該方法通過集中式的存儲(chǔ)目錄來定位數(shù)據(jù)對(duì)象的存儲(chǔ)位置。這種方法可以利用存儲(chǔ)目錄中存放的存儲(chǔ)節(jié)點(diǎn)信息,將數(shù)據(jù)對(duì)象的多個(gè)副本放置在不同機(jī)架上,這樣可大大提高系統(tǒng)的數(shù)據(jù)可靠性。然而,它存在以下兩個(gè)缺陷:(1)隨著存儲(chǔ)目錄的增長(zhǎng),查找數(shù)據(jù)對(duì)象所需的開銷也會(huì)越來越大;(2)為提高數(shù)據(jù)對(duì)象的定位速度,一般情況下都會(huì)將存儲(chǔ)目錄存放在服務(wù)器內(nèi)存中,對(duì)于PB級(jí)的云存儲(chǔ)系統(tǒng)來說,文件的數(shù)量可能達(dá)到上億級(jí),這導(dǎo)致存儲(chǔ)目錄將會(huì)占用上百GB的內(nèi)存。因此,當(dāng)數(shù)據(jù)對(duì)象數(shù)量達(dá)到上億級(jí)別時(shí),基于集中式存儲(chǔ)目錄的數(shù)據(jù)放置方法在存儲(chǔ)開銷和數(shù)據(jù)定位的時(shí)間開銷上都是難以接受的,此外,還會(huì)大大限制系統(tǒng)的擴(kuò)展性。 連續(xù)數(shù)據(jù)保護(hù)連續(xù)數(shù)據(jù)保護(hù)是一種連續(xù)捕獲和保存數(shù)據(jù)變化,并將變化后的數(shù)據(jù)獨(dú)立于初始數(shù)據(jù)進(jìn)行保存的方法,可以實(shí)現(xiàn)過去任意一個(gè)時(shí)間點(diǎn)的數(shù)據(jù)恢復(fù)。連續(xù)數(shù)據(jù)保護(hù)系統(tǒng)可能基于塊、文件或應(yīng)用,并且為數(shù)量無限的可變恢復(fù)點(diǎn)提供精細(xì)的可恢復(fù)對(duì)象。連續(xù)數(shù)據(jù)保護(hù)可以提供更快的數(shù)據(jù)檢索、更強(qiáng)的數(shù)據(jù)保護(hù)和更高的業(yè)務(wù)連續(xù)性能力,而與傳統(tǒng)的備份解決方案相比,連續(xù)數(shù)據(jù)保護(hù)的總體成本和復(fù)雜性都要低。連續(xù)數(shù)據(jù)保護(hù)解決方案應(yīng)當(dāng)具備以下幾個(gè)基本特性:數(shù)據(jù)的改變受到連續(xù)的捕獲和跟蹤;所有的數(shù)據(jù)改變都存儲(chǔ)在一個(gè)與主存儲(chǔ)地點(diǎn)不同的獨(dú)立地點(diǎn)中;恢復(fù)點(diǎn)目標(biāo)是任意的,而且不需要在實(shí)際恢復(fù)之前事先定義。盡管一些廠商推出了連續(xù)數(shù)據(jù)保護(hù)產(chǎn)品,然而從它們的功能上分析,還做不到真正連續(xù)的數(shù)據(jù)保護(hù),比如有的產(chǎn)品備份時(shí)間間隔為一小時(shí),那么在這一小時(shí)內(nèi)仍然存在數(shù)據(jù)丟失的風(fēng)險(xiǎn),因此,嚴(yán)格地講,它們還不是完全意義上的連續(xù)數(shù)據(jù)保護(hù)產(chǎn)品,目前我們只能稱之為類似連續(xù)數(shù)據(jù)保護(hù)產(chǎn)品。 數(shù)據(jù)縮減技術(shù)數(shù)據(jù)量的急劇增長(zhǎng)為存儲(chǔ)技術(shù)提出了新的問題和要——怎樣低成本高效快速地解決無限增長(zhǎng)的信息的存儲(chǔ)和計(jì)算。通過云存儲(chǔ)技術(shù)不僅解決了存儲(chǔ)中的高安全性、可靠性、可擴(kuò)展、易管理等存儲(chǔ)的基本要求,同時(shí)也利用云存儲(chǔ)中的數(shù)據(jù)縮減技術(shù),滿足海量信息爆炸式增長(zhǎng)趨勢(shì),一定程度上節(jié)約企業(yè)存儲(chǔ)成本,提高效率。 自動(dòng)精簡(jiǎn)配置該技術(shù)是利用虛擬化方法減少物理存儲(chǔ)空間的分配,通過“欺騙”操作系統(tǒng),造成的好像存儲(chǔ)空間有足夠大,而實(shí)際物理存儲(chǔ)空間并沒有那么大,會(huì)減少已分配但未使用的存儲(chǔ)容量的浪費(fèi),在分配存儲(chǔ)空間時(shí),按需分配,最大限度提升存儲(chǔ)空間利用率,利用率超90%。利用自動(dòng)精簡(jiǎn)配置技術(shù),用戶不需要了解存儲(chǔ)空間分配的細(xì)節(jié),能幫助用戶在不降低性能的情況下,大幅度提高存儲(chǔ)空間利用效率;需求變化時(shí),無需更改存儲(chǔ)容量設(shè)置,通過虛擬化技術(shù)集成存儲(chǔ),減少超量配置,降低總功耗。這項(xiàng)技術(shù)已經(jīng)成為選擇存儲(chǔ)系統(tǒng)的關(guān)鍵標(biāo)準(zhǔn)之一。隨著自動(dòng)精簡(jiǎn)配置的存儲(chǔ)越來越多,物理存儲(chǔ)的耗盡成為自動(dòng)精簡(jiǎn)配置環(huán)境中經(jīng)常出現(xiàn)的風(fēng)險(xiǎn),因此,告警、通知和存儲(chǔ)分析成為必要的功能。 自動(dòng)存儲(chǔ)分層在過去,數(shù)據(jù)移動(dòng)主要依靠手工操作,由管理員來判斷數(shù)據(jù)訪問壓力,遷移的時(shí)候只能一個(gè)整卷一起遷移。自動(dòng)存儲(chǔ)分層技術(shù)的特點(diǎn)則是其分層的自動(dòng)化和智能化。一個(gè)磁盤陣列能夠把活動(dòng)數(shù)據(jù)保留在快速、昂貴的存儲(chǔ)上,把不活躍的數(shù)據(jù)遷移到廉價(jià)的低速層上,以限制存儲(chǔ)的花費(fèi)總量。數(shù)據(jù)從一層遷移到另一層的粒度越精細(xì),使用的昂貴存儲(chǔ)的效率就越高。自動(dòng)存儲(chǔ)分層的重要性隨著固態(tài)存儲(chǔ)在當(dāng)前磁盤陣列中的采用而提升,并隨著云存儲(chǔ)的來臨而補(bǔ)充內(nèi)部部署的存儲(chǔ)。自動(dòng)存儲(chǔ)分層使用戶數(shù)據(jù)保留在合適的存儲(chǔ)層級(jí),而不需要用戶定義的策略,因此減少了存儲(chǔ)需求的總量并實(shí)質(zhì)上減少了成本,提升了性能。 重復(fù)數(shù)據(jù)刪除該技術(shù)通過刪除集中重復(fù)的數(shù)據(jù),只保留其中一份,從而消除冗余數(shù)據(jù),可以將數(shù)據(jù)縮減到原來的2%~5%。按照消重的粒度重復(fù)數(shù)據(jù)刪除技術(shù)可以分為文件級(jí)和數(shù)據(jù)塊級(jí)。該技術(shù)計(jì)算數(shù)據(jù)指紋,具有相同指紋的數(shù)據(jù)塊即可認(rèn)為是相同的數(shù)據(jù)塊,存儲(chǔ)系統(tǒng)中僅需要保留一份。這樣,一個(gè)物理文件在存儲(chǔ)系統(tǒng)中就只對(duì)應(yīng)一個(gè)邏輯表示。由于大幅度減少了物理存儲(chǔ)空間的信息量,進(jìn)而減少傳輸過程中的網(wǎng)絡(luò)帶寬、節(jié)約設(shè)備成本、降低能耗。 數(shù)據(jù)壓縮數(shù)據(jù)壓縮就是將收到的數(shù)據(jù)通過存儲(chǔ)算法存儲(chǔ)到更小的空間中去。隨著目前CPU處理能力的大幅提高,應(yīng)用實(shí)時(shí)壓縮技術(shù)來節(jié)省數(shù)據(jù)占用空間成為現(xiàn)實(shí),這項(xiàng)新技術(shù)就是最新研發(fā)出的在線壓縮,它與傳統(tǒng)壓縮技術(shù)不同,當(dāng)數(shù)據(jù)在首次寫入時(shí)即被壓縮,以幫助系統(tǒng)控制大量數(shù)據(jù)在主存中雜亂無章地存儲(chǔ)的情形,特別是多任務(wù)工作時(shí)更加明顯。該技術(shù)還可以在數(shù)據(jù)寫入到存儲(chǔ)系統(tǒng)前壓縮數(shù)據(jù),進(jìn)一步提高了存儲(chǔ)系統(tǒng)中的磁盤和緩存的性能和效率。壓縮算法分為無損壓縮和有損壓縮。相對(duì)于有損壓縮來說,無損壓縮的占用空間大,壓縮比不高,但是它有效地保存了原始信息,沒有任何信號(hào)丟失。但是隨著限制無損格式的種種因素逐漸被消除,使得無損壓縮格式具有廣闊的應(yīng)用前景。數(shù)據(jù)壓縮中使用的LZ77算法,主要由2部分構(gòu)成,滑窗(Sliding Window)和自適應(yīng)編碼(Adaptive Coding)。壓縮處理時(shí),在滑窗中查找與待處理數(shù)據(jù)相同的塊,并用該塊在滑窗中的偏移值及塊長(zhǎng)度替代待處理數(shù)據(jù),從而實(shí)現(xiàn)壓縮編碼。如果滑窗中沒有與待處理數(shù)據(jù)塊相同的字段,或偏移值及長(zhǎng)度數(shù)據(jù)超過被替代數(shù)據(jù)塊的長(zhǎng)度,則不進(jìn)行替代處理。該算法的實(shí)現(xiàn)非常簡(jiǎn)潔,處理比較簡(jiǎn)單,能夠適應(yīng)各種高速應(yīng)用。數(shù)據(jù)壓縮的應(yīng)用可以顯著降低待處理和存儲(chǔ)的數(shù)據(jù)量,一般情況下可實(shí)現(xiàn)2:1~3:1的壓縮比。 LZ77算法示意圖壓縮和去重是互補(bǔ)性的技術(shù),提供去重的廠商通常也提供壓縮。而對(duì)于虛擬服務(wù)器卷、電子郵件附件、文件和備份環(huán)境來說,去重通常更加有效,壓縮對(duì)于隨機(jī)數(shù)據(jù)效果更好,像數(shù)據(jù)庫。換句話說,在數(shù)據(jù)重復(fù)性比較高的地方,去重比壓縮有效??蓴U(kuò)展和高性能的存儲(chǔ)安全技術(shù),是推動(dòng)云存儲(chǔ)最根本的保證,已經(jīng)成為當(dāng)前網(wǎng)絡(luò)存儲(chǔ)領(lǐng)域的研究熱點(diǎn)。云存儲(chǔ)應(yīng)用中的存儲(chǔ)安全包括認(rèn)證服務(wù)、數(shù)據(jù)加密存儲(chǔ)、安全管理、安全日志和審計(jì)。(1)認(rèn)證服務(wù):訪問控制服務(wù)實(shí)現(xiàn)用戶身份認(rèn)證、授權(quán),防止非法訪問和越權(quán)訪問。主要功能包括:用戶只能對(duì)經(jīng)管理員或文件所有者授權(quán)的許可文件進(jìn)行被許可的操作;管理員只能進(jìn)行必要的管理操作,如用戶管理、數(shù)據(jù)備份、熱點(diǎn)對(duì)象遷移,而不能訪問用戶加密了的私有數(shù)據(jù)。(2)加密存儲(chǔ):是對(duì)指定的目錄和文件進(jìn)行加密后保存,實(shí)現(xiàn)敏感數(shù)據(jù)存儲(chǔ)和傳送過程中的機(jī)密性保護(hù)。(3)安全管理:主要功能是用戶信息和權(quán)限的維護(hù),如用戶帳戶注冊(cè)和注銷等,授權(quán)用戶、緊急情況下對(duì)用戶權(quán)限回收等。(4)安全日志和審計(jì):是記錄用戶和系統(tǒng)與安全相關(guān)的主要活動(dòng)事件,為系統(tǒng)管理員監(jiān)控系統(tǒng)和活動(dòng)用戶提供必要的審計(jì)信息。隨著存儲(chǔ)系統(tǒng)和存儲(chǔ)設(shè)備越來越網(wǎng)絡(luò)化,存儲(chǔ)系統(tǒng)在保證敏感數(shù)據(jù)機(jī)密性的同時(shí),必須提供相應(yīng)的加密數(shù)據(jù)共享技術(shù)。必須研究適用于網(wǎng)絡(luò)存儲(chǔ)系統(tǒng)的加密存儲(chǔ)技術(shù),提供端到端加密存儲(chǔ)技術(shù)及密鑰長(zhǎng)期存儲(chǔ)和共享機(jī)制,以確保用戶數(shù)據(jù)的機(jī)密性和隱私性,提高密鑰存儲(chǔ)的安全性、分發(fā)的高效性及加密策略的靈活性。在海量的加密信息存儲(chǔ)中,加密檢索是實(shí)現(xiàn)信息共享的主要手段,是加密存儲(chǔ)中必須解決的問題之一。加密檢索技術(shù)有線性搜索算法、基于關(guān)鍵詞的公鑰加密搜索、安全索引、引入相關(guān)排序的加密搜索算法。(1)線性搜索算法首先用對(duì)稱加密算法對(duì)明文信息加密,對(duì)于每個(gè)關(guān)鍵詞對(duì)應(yīng)的密文信息,生成一串長(zhǎng)度小于密文信息長(zhǎng)度的偽隨機(jī)序列,并生成一由偽隨機(jī)序列及密文信息確定的校驗(yàn)序列,偽隨機(jī)序列的長(zhǎng)度與檢驗(yàn)序列長(zhǎng)度之和等于密文信息的長(zhǎng)度,偽隨機(jī)序列及檢驗(yàn)序列對(duì)密文信息再次加密。在搜索過程中,用戶提交明文信息對(duì)應(yīng)的密文信息序列。在服務(wù)器端,密文信息序列被線性的同每一段序列模2加。如果得到的結(jié)果滿足校驗(yàn)關(guān)系,那么說明密文信息序列出現(xiàn),否則,說明密文信息不存在。線性搜索方法是一次一密的加密信息檢索算法,因此有極強(qiáng)的抵抗統(tǒng)計(jì)分析的能力。但其有一個(gè)致命的缺點(diǎn),即逐次匹配密文信息,這使得這種檢索方法在大數(shù)據(jù)集的情況下難以應(yīng)用。(2)基于關(guān)鍵詞的公鑰加密搜索算法[14]由Boneh等人提出的,其目的是可以在用戶端存儲(chǔ)、計(jì)算資源不足的情況下,通過訪問遠(yuǎn)端數(shù)據(jù)庫獲取數(shù)據(jù)信息。此算法首先生成公鑰、私鑰,然后對(duì)存儲(chǔ)的明文關(guān)鍵詞用公鑰進(jìn)行加密,生成可搜索的密文信息。此算法可以解決兩方面的問題:第一,存儲(chǔ)、計(jì)算資源分布的不對(duì)稱性,即用戶的計(jì)算存儲(chǔ)能力不能實(shí)時(shí)滿足其需求;第二,用戶在移動(dòng)情況下對(duì)存儲(chǔ)、檢索數(shù)據(jù)的需求,比如Email服務(wù)等。(3)安全索引[15]由Park等人提出,其機(jī)制是每次加密所用的密鑰是事先生成的一組逆Hash序列,加密后的索引被放入布隆過濾器中。當(dāng)檢索的時(shí)候,首先用逆Hash序列密鑰生成多個(gè)陷門,然后進(jìn)行布隆檢測(cè)。對(duì)返回的密文文檔解密即可得到所需檢索的文檔。針對(duì)有新用戶加入、舊用戶退出的多用戶加密信息檢索,這是一種解決方法。但其存在的缺陷是需要生成大量的密鑰序列,隨著檢索次數(shù)的增加,每多進(jìn)行一次檢索,其計(jì)算復(fù)雜度均線性增加。這在實(shí)際應(yīng)用中很難被接受。(4)引入相關(guān)排序的加密搜索算法[16]Swaminathan等人提出了保護(hù)隱私的排序搜索算法。在這一算法中,每一文檔中關(guān)鍵詞的詞頻都被保序加密算法加密。提交查詢給服務(wù)器端后,首先計(jì)算檢索出含有關(guān)鍵詞密文的加密文檔;然后對(duì)用保序算法加密的詞頻對(duì)應(yīng)的密文信息進(jìn)行排序處理;最后把評(píng)價(jià)值高的加密文檔返回給用戶,由用戶對(duì)其進(jìn)行解密。這一種方法可以在給定多個(gè)可能相關(guān)文檔的情況下對(duì)加密文檔進(jìn)行排序,進(jìn)而把最可能相關(guān)的文檔返回給用戶。但這一種算法首先不適用于一個(gè)查詢包含多個(gè)查詢?cè)~的情況,其次算法只利用了文檔中的詞頻信息,無法利用詞的逆文檔頻率,進(jìn)而向量空間模型無法直接應(yīng)用。 容錯(cuò)技術(shù)數(shù)據(jù)容錯(cuò)技術(shù)一般都是通過增加數(shù)據(jù)冗余來實(shí)現(xiàn)的。冗余提高了容錯(cuò)性,但是也增加了存儲(chǔ)資源的消耗。因此,在保證系統(tǒng)容錯(cuò)性的同時(shí),要盡可能地提高存儲(chǔ)資源的利用率,以降低成本。目前,常用的容錯(cuò)技術(shù)主要有基于復(fù)制(replication)的容錯(cuò)技術(shù)和基于糾刪碼(erasure code)的容錯(cuò)技術(shù)兩種。(1)基于復(fù)制的容錯(cuò)技術(shù)該技術(shù)對(duì)一個(gè)數(shù)據(jù)對(duì)象創(chuàng)建多個(gè)相同的數(shù)據(jù)副本,并把得到的多個(gè)副本散布到不同的存儲(chǔ)節(jié)點(diǎn)上。當(dāng)若干數(shù)據(jù)對(duì)象失效以后,可以通過訪問其他有效的副本獲取數(shù)據(jù)?;趶?fù)制的容錯(cuò)技術(shù)簡(jiǎn)單直觀,易于實(shí)現(xiàn)和部署,但是存儲(chǔ)空間開銷很大;當(dāng)數(shù)據(jù)失效以后,只需要從其他副本下載同樣大小的數(shù)據(jù)即可進(jìn)行修復(fù)。(2)基于糾刪碼的容錯(cuò)技術(shù)該技術(shù)源于信道傳輸?shù)木幋a技術(shù),因?yàn)槟軌蛉萑潭鄠€(gè)數(shù)據(jù)幀的丟失,被引入到分布存儲(chǔ)領(lǐng)域,使得基于糾刪碼的容錯(cuò)技術(shù)成為能夠容忍多個(gè)數(shù)據(jù)塊同時(shí)失效的、最常用的基于編碼的容錯(cuò)技術(shù)?;诰幋a的容錯(cuò)技術(shù)通過對(duì)多個(gè)數(shù)據(jù)對(duì)象進(jìn)行編碼產(chǎn)生編碼數(shù)據(jù)對(duì)象,能夠把多個(gè)數(shù)據(jù)塊的信息融合到較少的冗余信息中,因此能夠有效地節(jié)省存儲(chǔ)空間,但是對(duì)數(shù)據(jù)的讀寫操作要分別進(jìn)行編碼和解碼操作,需要一些計(jì)算開銷;當(dāng)數(shù)據(jù)失效以后,需要下載的數(shù)據(jù)量一般遠(yuǎn)大于失效數(shù)據(jù)大小,修復(fù)成本較高。 4云存儲(chǔ)的架構(gòu)技術(shù)GFS(Google File System),是Google公司為了存儲(chǔ)海量搜索數(shù)據(jù)而設(shè)計(jì)的專用文件系統(tǒng)。GFS是一個(gè)可擴(kuò)展的分布式文件系統(tǒng),用于大型的、分布式的、對(duì)大量數(shù)據(jù)進(jìn)行訪問的應(yīng)用。它運(yùn)行于廉價(jià)的普通硬件上,但可以提供容錯(cuò)功能,可以給大量的用戶提供總體性能較高的服務(wù)。GFS提供了一個(gè)類似傳統(tǒng)文件系統(tǒng)的接口,雖然它沒有向POSIX(Portable Operating System Interface,可移植操作系統(tǒng)接口),那樣實(shí)現(xiàn)標(biāo)準(zhǔn)的API(Application Programming Interface,應(yīng)用程序編程接口)。文件在目錄中按照層次組織,用路徑名來標(biāo)識(shí),可應(yīng)用在Linux和Windows等各種平臺(tái)。GFS系統(tǒng)架構(gòu)[17]: GFS系統(tǒng)架構(gòu)客戶端在訪問GFS時(shí),首先訪問Master節(jié)點(diǎn),獲取將要與之進(jìn)行交互的Chunk Server信息,然后直接訪問這些Chunk Server完成數(shù)據(jù)存取。GFS的這種設(shè)計(jì)方法實(shí)現(xiàn)了控制流和數(shù)據(jù)流的分離。Client與Master之間只有控制流,而無數(shù)據(jù)流,這樣就極大地降低了Master的負(fù)載,使之不成為系統(tǒng)性能的一個(gè)瓶頸。Client與Chunk Server之間直接傳輸數(shù)據(jù)流,同時(shí)由于文件被分成多個(gè)Chunk進(jìn)行分布式存儲(chǔ),Client可以同時(shí)訪問多個(gè)Chunk Server,從而使得整個(gè)系統(tǒng)的I/O高度并行,系統(tǒng)整體性能得到提高。具體來說,GFS具有以下幾個(gè)特點(diǎn)。(1)采用中心服務(wù)器模式GFS采用中心服務(wù)器模式來管理整個(gè)文件系統(tǒng),可以大大簡(jiǎn)化設(shè)計(jì),從而降低實(shí)現(xiàn)難度。Master管理了分布式文件系統(tǒng)中的所有元數(shù)據(jù)。文件劃分為Chunk進(jìn)行存儲(chǔ),對(duì)于Master來說,每個(gè)Chunk Se
點(diǎn)擊復(fù)制文檔內(nèi)容
研究報(bào)告相關(guān)推薦
文庫吧 www.dybbs8.com
備案圖片鄂ICP備17016276號(hào)-1