數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)模型、數(shù)據(jù)組織、數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)(學(xué)時(shí)2)-在線瀏覽
2024-12-05 15:40本頁(yè)面
【正文】 問(wèn)題，是因?yàn)樗钌畹赜绊懘娣旁跀?shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)量的大小，同時(shí)影響數(shù)據(jù)倉(cāng)庫(kù)所能回答的查詢類型。 粒度 1. 粒度 粒度的一個(gè)例子 確定粒度級(jí)是數(shù)據(jù)倉(cāng)庫(kù)環(huán)境中最重要的設(shè)計(jì)問(wèn)題 DWamp。 ?該圖的右邊是一個(gè)高粒度級(jí)。 ?顯然，用高粒度級(jí)表示數(shù)據(jù)將比用低粒度級(jí)表示數(shù)據(jù)的效率空間要高得多。 DWamp。即當(dāng)提高數(shù)據(jù)粒度級(jí)時(shí) ,數(shù)據(jù)所能回答查詢的能力就會(huì)隨之降低。 ?在設(shè)計(jì)和構(gòu)造數(shù)據(jù)倉(cāng)庫(kù)之初就必須仔細(xì)考慮這種權(quán)衡。DM 2021/11/12 23 1. 粒度 粒度級(jí)對(duì)能回答什么問(wèn)題和回答問(wèn)題所需什么資源有深刻的影響 DWamp。DM 2021/11/12 25 ?很多時(shí)候，十分需要提高存儲(chǔ)與訪問(wèn)數(shù)據(jù)的效率，以及非常詳細(xì)地分析數(shù)據(jù)的能力。 ?一個(gè)電話公司的 “雙重”粒度級(jí)的設(shè)計(jì)，能滿足大多數(shù)機(jī)構(gòu)的需要。多達(dá) 3 0多天的細(xì)節(jié)存放在這種操作層中。 粒度的雙重級(jí)別 DWamp。 ?例如： Jones的記錄顯示她每月打電話的次數(shù)、每個(gè)電話的平均長(zhǎng)度、長(zhǎng)途電話的次數(shù)、接線員幫助呼叫的次數(shù)，等等 。DM 2021/11/12 27 1. 粒度 DWamp。DM 2021/11/12 29 ?在某些情況下 (如人口統(tǒng)計(jì)分析 )，樣本數(shù)據(jù)庫(kù)是非常有用的。除非設(shè)計(jì)者知道這些限制，否則就不應(yīng)該創(chuàng)建這種數(shù)據(jù)庫(kù)以作為數(shù)據(jù)倉(cāng)庫(kù)的一部分。假如想知道“ Jones是不是顧客？” 不要在樣本數(shù)據(jù)庫(kù)中找這條信息。 ?樣本數(shù)據(jù)庫(kù)適用于作統(tǒng)計(jì)分析和觀察發(fā)展趨勢(shì)。DM 2021/11/12 30 ?當(dāng)數(shù)據(jù)必須以整體觀察時(shí)，樣本數(shù)據(jù)庫(kù)能提供非常理想的結(jié)果，但決不適用于處理單個(gè)的數(shù)據(jù)記錄。判斷樣本所帶來(lái)的問(wèn)題是會(huì)使樣本數(shù)據(jù)具有某種偏差，隨機(jī)抽取數(shù)據(jù)帶來(lái)的問(wèn)題是可能無(wú)法進(jìn)行統(tǒng)計(jì)。 DWamp。 ?在數(shù)據(jù)倉(cāng)庫(kù)中，圍繞分割問(wèn)題的焦點(diǎn)不是該不該分割而是如何去分割的問(wèn)題。 ?數(shù)據(jù)分割為什么如此重要呢？因?yàn)樾〉奈锢韱卧転椴僮髡吆驮O(shè)計(jì)者在管理數(shù)據(jù)時(shí)提供比對(duì)大的物理單元更大的靈活性。DM 2021/11/12 32 ? 分割之后有以下優(yōu)點(diǎn)： ? 容易重構(gòu)； ? 自由索引； ? 順序掃描 (若需要 )； ? 容易重組； ? 容易恢復(fù)； ? 容易監(jiān)控。DM 2021/11/12 33 ?簡(jiǎn)單地說(shuō)，數(shù)據(jù)倉(cāng)庫(kù)的本質(zhì)之一就是靈活地訪問(wèn)數(shù)據(jù)。因而，對(duì)所有當(dāng)前細(xì)節(jié)的數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)都要進(jìn)行分割。此外，任何給定的數(shù)據(jù)單元屬于且僅屬于一個(gè)分割。DM 2021/11/12 34 ?有多種數(shù)據(jù)分割的標(biāo)準(zhǔn)。然而，在數(shù)據(jù)倉(cāng)庫(kù)環(huán)境中，按日期幾乎總是分割標(biāo)準(zhǔn)中的一個(gè)必然組成部分。DM 2021/11/12 35 ? 數(shù)據(jù)追加：數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)初裝完成后 , 再向數(shù)據(jù)倉(cāng)庫(kù)輸入數(shù)據(jù)的過(guò)程 ? 追加內(nèi)容：上次數(shù)據(jù)追加后在 OLTP數(shù)據(jù)庫(kù)中變化了的數(shù)據(jù) ? 變化數(shù)據(jù)的捕捉途徑 : ? 時(shí)標(biāo)方法 ? DELTA文件 ? 前后映象文件 ? 日志文件 數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)追加 DWamp。 對(duì)新插入或更新的數(shù)據(jù)記錄加更新時(shí)的時(shí)標(biāo) ? 優(yōu)點(diǎn) ? 方法簡(jiǎn)單 ? 問(wèn)題 ? 許多數(shù)據(jù)庫(kù)中的數(shù)據(jù)并不含有時(shí)標(biāo) ， 很難在得到實(shí)際應(yīng)用 DWamp。 由應(yīng)用生成 DELTA文件 ， 記錄應(yīng)用所改變的所有內(nèi)容 ? 優(yōu)點(diǎn) ? 避免了掃描整個(gè)數(shù)據(jù)庫(kù) ， 效率比較高 ? 問(wèn)題 ? 一般的應(yīng)用程序不具有生成 DELTA文件的功能 ? 更改應(yīng)用代碼 ， 應(yīng)用在生成新數(shù)據(jù)時(shí)可自動(dòng)將其記錄下來(lái) ? 應(yīng)用成千上萬(wàn) ， 且修改代碼十分繁瑣 ， 很難實(shí)現(xiàn) DWamp。DM 2021/11/12 39 ? 日志文件法： 通過(guò)分析數(shù)據(jù)庫(kù)系統(tǒng)日志文件來(lái)獲取數(shù)據(jù)變化的情況 ， 得到追加內(nèi)容 。 要進(jìn)行改進(jìn) 。DM 2021/11/12 40 第 4章 數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì) 本章要點(diǎn) ? 數(shù)據(jù)倉(cāng)庫(kù)的設(shè)計(jì)原則 ? 數(shù)據(jù)倉(cāng)庫(kù)的設(shè)計(jì)步驟 ? 數(shù)據(jù)倉(cāng)庫(kù)生成 ? 數(shù)據(jù)倉(cāng)庫(kù)的使用與維護(hù) DWamp。 ? 因此，數(shù)據(jù)庫(kù)設(shè)計(jì)中的很多設(shè)計(jì)思想與方法都可在數(shù)據(jù)倉(cāng)庫(kù)中得到應(yīng)用。 DWamp。 ? 數(shù)據(jù)倉(cāng)庫(kù)是面向主題的、集成的、不可更新的、隨時(shí)間的變化而不斷變化的，這些特點(diǎn)決定了數(shù)據(jù)倉(cāng)庫(kù)的系統(tǒng)設(shè)計(jì)不能采用同開發(fā)傳統(tǒng)的 OLTP數(shù)據(jù)庫(kù)一樣的設(shè)計(jì)方法。DM 2021/11/12 43 數(shù)據(jù)倉(cāng)庫(kù)的設(shè)計(jì) － 與數(shù)據(jù)庫(kù)設(shè)計(jì)的區(qū)別 ? 系統(tǒng)設(shè)計(jì)的 目標(biāo) 不同： 數(shù)據(jù)庫(kù) 是 面向事務(wù)型處理 的，所以事務(wù)型處理性能是系統(tǒng)設(shè)計(jì)的一個(gè)主要目標(biāo)。 DWamp。而在 決策分析 時(shí)，決策者分析問(wèn)題的角度多種多樣，所以數(shù)據(jù)處理流和信息流不固定，甚至決策者對(duì)所要進(jìn)行的分析處理都不太明了，數(shù)據(jù)的分析處理的需求更靈活。 DWamp。數(shù)據(jù)倉(cāng)庫(kù) 中的數(shù)據(jù)大部分是從企業(yè)內(nèi)部的數(shù)據(jù)庫(kù)系統(tǒng)得到的，還有一部分是企業(yè)外部的非結(jié)構(gòu)化數(shù)據(jù)，這些數(shù)據(jù)都是安全可靠且正確有效的，所以在系統(tǒng)設(shè)計(jì)時(shí)它關(guān)心的不是數(shù)據(jù)的安全性和完整性，而 是數(shù)據(jù)的一致性 。DM 2021/11/12 46 數(shù)據(jù)倉(cāng)庫(kù)的設(shè)計(jì)－ 與數(shù)據(jù)庫(kù)設(shè)計(jì)的區(qū)別 (Cont.) ? 數(shù)據(jù)的處理類型 不同： 數(shù)據(jù)庫(kù)系統(tǒng) 支持的是事務(wù)型處理，主要指數(shù)據(jù)的 增、刪、改、查 等等，系統(tǒng)設(shè)計(jì)時(shí)都是針對(duì)某一具體應(yīng)用。 DWamp。 在決策分析時(shí)，決策人員往往無(wú)法給決策需求一個(gè)規(guī)范的說(shuō)明，只能給出一個(gè)模糊的描述，對(duì)這種需求不確定的開發(fā)過(guò)程，設(shè)計(jì)方法有很大的不同，采用與 SDLC相反的 CLDS法 。 SDLC起始于需求，CLDS起始于數(shù)據(jù) 。DM 2021/11/12 49 生命周期的比較 SDLC CLDS 需求匯總 實(shí)現(xiàn) 分析 集成數(shù)據(jù) 設(shè)計(jì) 偏差測(cè)試 編程 針對(duì)數(shù)據(jù)的編程 測(cè)試 分析結(jié)果 集成 理解需求 DWamp。數(shù)據(jù)倉(cāng)庫(kù)中包含了大量的歷史數(shù)據(jù)，它是一段較長(zhǎng)時(shí)間內(nèi)的數(shù)據(jù)。 ? 支持高性能的復(fù)雜分析 。 DWamp。數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)是從多個(gè)應(yīng)用領(lǐng)域中提取出來(lái)的，在不同的應(yīng)用領(lǐng)域和不同的數(shù)據(jù)庫(kù)系統(tǒng)中都有不同的結(jié)構(gòu)和形式。 ? 對(duì)高層決策的最終用戶提供工具 。這些工具的設(shè)計(jì)對(duì)于開發(fā)一個(gè)完整的數(shù)據(jù)倉(cāng)庫(kù)及其應(yīng)用體系是至關(guān)重要的。DM 2021/11/12 52 ? 數(shù)據(jù)倉(cāng)庫(kù)
教學(xué)課件相關(guān)推薦
鄂ICP備17016276號(hào)-1