北郵大數(shù)據(jù)技術(shù)課程重點總結(jié)-資料下載頁
2025-07-13 21:49本頁面
【正文】 MapReduce的體系結(jié)構(gòu)：Client、JobTracker、TaskTracker、TaskMapReduce的工作流程：Split（分片）：Map端的Shuffle過程詳解：Reduce端的shuffle詳解：MapReduce小結(jié)：26. Spark特點：Hadoop的局限性：Spark生態(tài)系統(tǒng)：RDD：RDD的優(yōu)勢：RDD之間依賴關(guān)系的兩種類型：Stage劃分：Sprak小結(jié)：流數(shù)據(jù)：流計算處理流程：數(shù)據(jù)實時采集（保證實時性、低延遲、可靠穩(wěn)定）、數(shù)據(jù)實時計算、實時查詢服務(wù)（實時查詢服務(wù)可以不斷更新結(jié)果，并將用戶所需的結(jié)果實時推送給用戶）。流處理系統(tǒng)與傳統(tǒng)數(shù)據(jù)處理系統(tǒng)的區(qū)別：開源流計算框架——Storm（免費、開源的分布式實時計算系統(tǒng)）：Storm的工作流程：流計算小結(jié)：圖計算系統(tǒng)——Pregel簡介：BSP模型：圖計算小結(jié)：Pregel計算模型：Pregel執(zhí)行過程：Pregel容錯機(jī)制：HBase：BigTable：特點：HBase：HBase與傳統(tǒng)關(guān)系數(shù)據(jù)庫的對比：HBase數(shù)據(jù)模型：HBased 中的數(shù)據(jù)坐標(biāo)：HBase功能組件：Region的定位:HBased 系統(tǒng)架構(gòu)：Region服務(wù)器工作原理：47 / 47
環(huán)評公示相關(guān)推薦
鄂ICP備17016276號-1