數(shù)據(jù)倉庫初稿(第二版)-文庫吧資料
2025-03-13 12:39本頁面
【正文】 但是因為化簡總是有一個簡單的答案，大規(guī)模的運算相對獨立，所以化簡函數(shù)在高度并行環(huán)境下也很有用。 MapReduce 化簡 概念 2023/3/28 杭州斯凱網(wǎng)絡(luò)科技有限公司 15 而化簡操作指的是對一個列表的元素進(jìn)行適當(dāng)?shù)暮喜ⅲɡ^續(xù)看前面的例子，如果有人想知道班級的平均分該怎么做？他可以定義一個化簡函數(shù)，通過讓列表中的元素跟自己的相鄰的元素相加的方式把列表減半，如此遞歸運算直到列表只剩下一個元素，然后用這個元素除以人數(shù)，就得到了平均分。 事實上，每個元素都是被獨立操作的，而原始列表沒有被更改，因為這里創(chuàng)建了一個新的列表來保存新的答案。 MapReduce 映射 概念 2023/3/28 杭州斯凱網(wǎng)絡(luò)科技有限公司 14 簡單說來，一個映射函數(shù)就是對一些獨立元素組成的概念上的列表（例如，一個測試成績的列表）的每一個元素進(jìn)行指定的操作（比如前面的例子里，有人發(fā)現(xiàn)所有學(xué)生的成績都被高估了一分，他可以定義一個“減一”的映射函數(shù)，用來修正這個錯誤。他極大地方便了編程人員在不會分布式并行編程的情況下 ,將自己的程序運行在分布式系統(tǒng)上。 數(shù)據(jù)倉庫的架構(gòu)類型 2023/3/28 杭州斯凱網(wǎng)絡(luò)科技有限公司 9 Oracle數(shù)據(jù)倉庫的架構(gòu) 2023/3/28 杭州斯凱網(wǎng)絡(luò)科技有限公司 10 GreenPlum數(shù)據(jù)倉庫的架構(gòu) 2023/3/28 杭州斯凱網(wǎng)絡(luò)科技有限公司 11 GreenPlum數(shù)據(jù)倉庫的架構(gòu) 2023/3/28 杭州斯凱網(wǎng)絡(luò)科技有限公司 12 MapReduce 概念 2023/3/28 杭州斯凱網(wǎng)絡(luò)科技有限公司 13 MapReduce是一種編程模型 (并不是 google自己開發(fā)的編程工具 )，用于大規(guī)模數(shù)據(jù)集（大于 1TB）的并行運算。 。 。 數(shù)據(jù)倉庫的架構(gòu)設(shè)計 一些考慮因素 2023/3/28 杭州斯凱網(wǎng)絡(luò)科技有限公司 8 。 。 。 。在整個
環(huán)評公示相關(guān)推薦
鄂ICP備17016276號-1