武漢理工云計(jì)算重點(diǎn)(存儲(chǔ)版)
【正文】 + )。 for (IntWritable val : values) { sum += ()。 ()。在main函數(shù)中，需要設(shè)置一系列的類，詳細(xì)內(nèi)容參考源碼（7）MultipleOutputFormat類用于向文件輸出結(jié)果（8）LineRecordWriter類被MultipleOutputFormat中的方法調(diào)用，向文件輸出一個(gè)結(jié)果key,value對(duì) 4. 程序的運(yùn)行過程（1）程序從文件中讀出數(shù)據(jù)到內(nèi)存，生成matrix實(shí)例，通過組合左矩陣的行與右矩陣的列生成ac個(gè)matrixInputSplit（2）一個(gè)Mapper任務(wù)對(duì)一個(gè)matrixInputSplit中的每個(gè)key1,value1對(duì)調(diào)用一次Map方法對(duì)value1中的兩個(gè)整數(shù)相乘。 }}3. 程序中的類（1）matrix類用于存儲(chǔ)矩陣（2）IntPair類實(shí)現(xiàn)WritableComparable接口用于存儲(chǔ)整數(shù)對(duì)（3）matrixInputSplit類繼承了InputSplit接口，每個(gè)matrixInputSplit包括b個(gè)key,value對(duì)，用來生成一個(gè)積矩陣元素。 ()。 } } public static class IntSumReducer extends ReducerText, IntWritable, Text, IntWritable { private IntWritable result = new IntWritable()。 // 向量值 public void map(Object key, Text value, Context context) hrows IOException, InterruptedException { StringTokenizer itr = new StringTokenizer(())。 ()。//TOP N 定義 String[] otherArgs = new GenericOptionsParser(conf, args).getRemainingArgs()。 keys[i] = keys[i+1]。 for(Iterator k:()) { keys[i] = (Text)()。 if( len) (key,result)。 (key, result)。 private Text word = new Text()。import 。JobTracker是主控服務(wù)，只有一個(gè)，負(fù)責(zé)調(diào)度和管理TaskTracker，把Map任務(wù)和Reduce任務(wù)分配給空閑的TaskTrcker，讓這些任務(wù)并行運(yùn)行，并負(fù)責(zé)監(jiān)控任務(wù)的運(yùn)行情況。數(shù)據(jù)中心和基礎(chǔ)架構(gòu)是VMware云計(jì)算解決方案的基石云應(yīng)用平臺(tái)層（PaaS）VMware的云應(yīng)用平臺(tái)以SpringSource應(yīng)用和VMware vSphere為基礎(chǔ)，采用高級(jí)消息隊(duì)列協(xié)議AMQP，具有無縫擴(kuò)展的彈性數(shù)據(jù)管理技術(shù)和跨物理/虛擬環(huán)境可見性的性能監(jiān)控和應(yīng)用管理機(jī)制，并能實(shí)現(xiàn)私有云和公有云之間的遷移 桌面虛擬化產(chǎn)品（SaaS） 主要是基于桌面和應(yīng)用程序虛擬化，提供了VMware ThinApp、VMware Workstation、VMware Fusion、Zimbra、VMware Player、WMware移動(dòng)虛擬平臺(tái)（MVP）及VMware ACE等產(chǎn)品 2． 虛擬化分類虛擬化從結(jié)構(gòu)上可以分為寄居架構(gòu)和裸金屬架構(gòu)寄居架構(gòu)：在操作系統(tǒng)的層面之上進(jìn)行虛擬機(jī)實(shí)現(xiàn)，如VMware Workstation 裸金屬架構(gòu)：在計(jì)算機(jī)硬件上直接進(jìn)行虛擬化，是架設(shè)在計(jì)算機(jī)硬件和操作系統(tǒng)之間的虛擬化 ，如ESX Server3． 三種虛擬化軟件（參考）Citrix XenServer，微軟 Windows Server 2008 HyperV，VMware ESX ServerVMware ESX重點(diǎn)于服務(wù)器虛擬化，技術(shù)較成熟，功能也多，支持虛機(jī)系統(tǒng)多；Xenserver重點(diǎn)在于桌面虛擬化，性價(jià)比高，網(wǎng)絡(luò)性能好，適用于快速與大規(guī)模部署，支持系統(tǒng)也不少，但做桌面能發(fā)布出來的只有MS系統(tǒng)；HyperV起步的最晚，目前貌似只支持MS自家的系統(tǒng)，屬于服務(wù)器級(jí)的，Server08版自帶功能，起步晚，但背靠大樹好乘涼； Hadoop1. 定義Apache開源組織的一個(gè)分布式計(jì)算框架，可以在大量廉價(jià)的硬件設(shè)備組成的集群上運(yùn)行應(yīng)用程序，為應(yīng)用程序提供了一組穩(wěn)定可靠的接口，旨在構(gòu)建一個(gè)具有高可靠性和良好擴(kuò)展性的分布式系統(tǒng).2. 組件3. 起源(如圖)4. HDFS保障可靠性的措施（簡(jiǎn)答）P1921）冗余備份每個(gè)文件存儲(chǔ)成一系列數(shù)據(jù)塊（Block），默認(rèn)塊大小為64MB（可配置）。數(shù)據(jù)沖突問題：Dynamo犧牲一致性來換取系統(tǒng)的可靠性和可用性，因此Dynamo采用了一致性模型來解決數(shù)據(jù)沖突（不在意數(shù)據(jù)更新過程中的一致性問題，只要最終所有數(shù)據(jù)副本能保證一致即可）容錯(cuò)機(jī)制：臨時(shí)故障處理：Hinted HandoffDynamo為了提高系統(tǒng)可用性，使用樂觀方式仲裁讀寫。BigTable的設(shè)計(jì)目標(biāo)是：（1）適用性廣；（2）擴(kuò)展方便；（3）簡(jiǎn)單性；（4）高可用；在Bigtable中Chubby
教學(xué)教案相關(guān)推薦
鄂ICP備17016276號(hào)-1