【正文】 性、性能的平衡）4. 容錯：1． Master容錯1) 單個Master，對于前兩種元數(shù)據(jù)，GFS通過操作日志來提供容錯功能2) 第三種元數(shù)據(jù)信息保存在各個Chunk Server上，Master故障時，磁盤恢復3) GFS還提供了Master遠程的實時備份,防止Master徹底死機的情況2． Chunk Server容錯1）每一個Chunk有多個存儲副本（默認為三個），分布存儲在不同的Chunk Server上用戶態(tài)的GFS不會影響Chunk Server的穩(wěn)定性2）副本的分布策略需要考慮多種因素，如網(wǎng)絡(luò)的拓撲、機架的分布、磁盤的利用率等 3）對于每一個Chunk，必須將所有的副本全部寫入成功，才視為成功寫入盡管一份數(shù)據(jù)需要存儲三份，好像磁盤空間的利用率不高，但綜合比較多種因素，加之磁盤的成本不斷下降，采用副本無疑是最簡單、最可靠、最有效，而且實現(xiàn)的難度也最小的一種方法。云計算分類： SaaS（Software as a Service）：將軟件作為服務(wù) PaaS（Platform as a Service）：將平臺作為服務(wù) IaaS（Infrastructure as a Service）：將基礎(chǔ)設(shè)施作為服務(wù)并行計算：同時使用多種計算資源解決計算問題的過程分布式計算：將需要巨大計算能力的問題分成許多小部分進行處理，最后綜合結(jié)果網(wǎng)格計算：在動態(tài)、多機構(gòu)參與的虛擬組織中協(xié)同共享資源和求解問題 云計算與網(wǎng)格計算比較：（考簡答可能性低） 谷歌云平臺（1） GFS1. 設(shè)計目標（1）高性能（performance）；（2）可擴展（scalability）；（3）高可靠性（reliability）；（4）高可用（availability）；2. 系統(tǒng)架構(gòu)Client客戶端：應(yīng)用程序的訪問接口 Master主服務(wù)器：管理節(jié)點，在邏輯上只有一個，保存系統(tǒng)的元數(shù)據(jù)，負責整個文件系統(tǒng)的管理Chunk Server數(shù)據(jù)塊服務(wù)器：負責具體的存儲工作。文件系統(tǒng)由許多Node組成，每個Node代表一個文件，或者一個目錄。Dynamo中冗余存儲（備份）數(shù)據(jù)保存在環(huán)上順時針方向的后繼節(jié)點中。這樣既可以減輕源服務(wù)器的負擔，也可以減少整個網(wǎng)絡(luò)中流量分布不均的情況，進而改善整個網(wǎng)絡(luò)性能 Windows Azure1. Windows Azure 屬于PaaS模式2. Windows Azure平臺組成部分：1) Windows Azure：最底層，提供了一個在微軟數(shù)據(jù)中心服務(wù)器上運行應(yīng)用程序和存儲數(shù)據(jù)的Windows環(huán)境2) SQL Azure：云中關(guān)系數(shù)據(jù)庫，為云中基于SQL Server的關(guān)系型數(shù)據(jù)提供服務(wù)3) Windows Azure AppFabric：為在云中或本地系統(tǒng)中的應(yīng)用提供基于云的基礎(chǔ)架構(gòu)服務(wù)。6. HDFS是一個主從結(jié)構(gòu)的體系，HDFS集群有一個NameNode和很多個DataNode組成。 import 。import 。 public void reduce(Text key, IterableIntWritable values, Context context) throws IOException, InterruptedException { int sum = 0。//讀取TOP N } public void reduce(Text key, IterableIntWritable values, Context context) throws IOException, InterruptedException { int sum = 0。 IntWritable[] values = new IntWritable[3]。i++) { if(values[i]values[i+1]) { IntWritable temp = values[i]。i++) { (keys[i],values[i])。 ()。 }}2. 矩陣相乘（整數(shù)矩陣） 左矩陣的一行和右矩陣的一列組成一個InputSplit，其存儲b個key,value對，key存儲積矩陣元素位置，value為生成一個積矩陣元素的b個數(shù)據(jù)對中的一個；Map方法計算一個key,value對的value中數(shù)據(jù)對的積；而Reduce方法計算key值相同的所有積的和public class MatrixVectorCompute { public static class TokenizerMapper extends MapperObject, Text, Text, IntWritable { private Text lineNumber = new Text()。 (lineNumber, one)。 } } public static void main(String[] args) throws Exception { Configuration conf = new Configuration()。 (job, new Path(input))。（5）MapReduce框架實例化一個MultipleOutputFormat類，將結(jié)果輸出到文件