數(shù)據(jù)倉庫設(shè)計與開發(fā)培訓(xùn)課件-免費(fèi)閱讀
【正文】 ? 數(shù)據(jù)倉庫內(nèi)存儲了很長時間范圍內(nèi)的數(shù)據(jù) —— 從 5年到 10年；多維 DBMS中存儲著比較短時間范圍內(nèi)的數(shù)據(jù)。 數(shù)據(jù)倉庫的測試 ? 單元測試 ? 單元測試的目的是尋找出存在于單個程序、存儲過程和其它位于一些獨(dú)立環(huán)境中模塊的錯誤。 數(shù)據(jù)倉庫的實(shí)施 ? 實(shí)施過程中需要完成的工作： ? 建立數(shù)據(jù)倉庫與業(yè)務(wù)處理系統(tǒng)的接口 ? 數(shù)據(jù)倉庫的體系結(jié)構(gòu)建立 ? 實(shí)現(xiàn)數(shù)據(jù)倉庫物理倉庫與元數(shù)據(jù)庫 ? 進(jìn)行數(shù)據(jù)倉庫的數(shù)據(jù)初次加載 ? 完成數(shù)據(jù)倉庫的中間件設(shè)計 ? 進(jìn)行數(shù)據(jù)倉庫的測試。 ? 按 Bit— Wise檢索 ：對于 10M個記錄建立三列的Bit— Wise索引。一個文件包括很多塊，每個塊包括若干條記錄。 ? 了解外部存儲設(shè)備的特征。 確定數(shù)據(jù)分割策略 ? 把邏輯上整體的數(shù)據(jù)分割成較小的、可以獨(dú)立管理的物理單元進(jìn)行存儲 。根據(jù)系統(tǒng)使用的 DBMS，確定事實(shí)表和維表的具體實(shí)現(xiàn)。 銷售數(shù)據(jù)和維 銷售數(shù)據(jù) 商品 促銷 時間 部門 城市 地區(qū) 商店 概念模型到邏輯模型的轉(zhuǎn)換 ? 星型模型的設(shè)計步驟如下： （ 4）確定數(shù)據(jù)匯總水平。 ? 商品有如下屬性組： ? 商品的固有信息（商品號、商品名、類別、價格等）； ? 商品庫存信息（商品號、庫房號、庫存量、日期等）； ? 商品銷售信息（商品號、客戶號、銷售量等）； ? 客戶有如下屬性組： ? 客戶固有信息（客戶號、客戶名、住址、電話等）； ? 客戶購物信息（客戶號、商品號、售價、購買量等）。 現(xiàn)實(shí)世界 概念世界 邏輯世界 計算機(jī)世界 信用 特性 屬性 列（字段、數(shù)據(jù)項） 張三 個體 實(shí)體 記錄 客戶 整體 同質(zhì)總體 表文件 客戶與產(chǎn)品 整體間聯(lián)系 異質(zhì)總體 數(shù)據(jù)庫 概念模型設(shè)計 ? 概念模型的特點(diǎn)是： ? 能真實(shí)反映現(xiàn)實(shí)世界，能滿足用戶對數(shù)據(jù)的分析，達(dá)到?jīng)Q策支持的要求，它是現(xiàn)實(shí)世界的一個真實(shí)模型。 ? 企業(yè)追求的是長期的集成目標(biāo)，關(guān)心的是基于整個企業(yè)的全面解決方案。 用自頂向下方法 ? 建造企業(yè)數(shù)據(jù)倉庫 ? 建設(shè)中心數(shù)據(jù)模型 ? 一次性的完成數(shù)據(jù)的重構(gòu)工作 ? 最小化數(shù)據(jù)冗余度和不一致性 ? 存儲詳細(xì)的歷史數(shù)據(jù) ? 從企業(yè)數(shù)據(jù)倉庫中建造數(shù)據(jù)集市 ? 得到大部分的集成數(shù)據(jù) ? 直接依賴于數(shù)據(jù)倉庫的可用性 ? 問題 ? 投資效益的時間 ? ? 建設(shè)中心數(shù)據(jù)模型的必要性和可能性 ? ? 初始費(fèi)用 ? 數(shù)據(jù)集市 外部數(shù)據(jù) 數(shù)據(jù)集市 操作數(shù)據(jù) 企業(yè)數(shù)據(jù)倉庫 用自底向上方法 ? 建立部門數(shù)據(jù)集市 ? 限制在一個主題區(qū)域 ? 快速投資收益 ? 區(qū)域自治 – 設(shè)計的可伸縮性強(qiáng) ? 對相關(guān)部門的應(yīng)用容易復(fù)制 ? 對每個數(shù)據(jù)集市需要數(shù)據(jù)重構(gòu) ? 存在一定的冗余及不一致性 ? 逐步擴(kuò)展到企業(yè)數(shù)據(jù)倉庫 (EDW) ? 把建造 EDW作為一個長期的目標(biāo) ? 存在的問題 : ? 數(shù)據(jù)集市的數(shù)據(jù)都是可用的嗎 ? ? 能生成數(shù)據(jù)模型嗎 ? ? 如何解決不一致性 ? 操作數(shù)據(jù) (全局 )/外部數(shù)據(jù) 企業(yè)數(shù)據(jù)倉庫 數(shù)據(jù)集市 操作數(shù)據(jù) (局部 ) 操作數(shù)據(jù) (局部 ) 數(shù)據(jù)集市 采用從頂向下 VS 從底向下 ? 企業(yè)內(nèi)部、各個業(yè)務(wù)部門和各個工作崗位對數(shù)據(jù)倉庫的理解和期望不同。 ? 自底向上：用于一個數(shù)據(jù)集市或一個部門的數(shù)據(jù)倉庫開發(fā) ，容易獲得成功 。以便能把握和管理企業(yè)的經(jīng)營運(yùn)行，并對企業(yè)進(jìn)行業(yè)務(wù)重組。 數(shù)據(jù)倉庫的分析與設(shè)計 需求分析 概念模型設(shè)計 邏輯模型設(shè)計 物理模型設(shè)計 數(shù)據(jù)倉庫的索引技術(shù) 需求分析 ? 確定主題域 ? 支持決策的數(shù)據(jù)來源 ? 數(shù)據(jù)倉庫的成功標(biāo)準(zhǔn)和關(guān)鍵性能指標(biāo) ? 數(shù)據(jù)量與更新頻率 確定主題域 （ 1）明確對于決策分析最有價值的主題領(lǐng)域有哪些？ （ 2）每個主題域的商業(yè)維度是哪些？每個維度的粒度層次有哪些？ （ 3）制定決策的商業(yè)分區(qū)是什么？ （ 4）不同地區(qū)需要哪些信息來制定決策？ （ 5）對哪個區(qū)域提供特定的商品和服務(wù)？ 支持決策的數(shù)據(jù)來源 （ 1）哪些源數(shù)據(jù)（操作型）與商品主題有關(guān)？ （ 2）在已有報表和在線查詢中得到什么樣的信息？ （ 3）提供決策支持的細(xì)節(jié)程度是怎樣的？ 數(shù)據(jù)倉庫的成功標(biāo)準(zhǔn)和關(guān)鍵性能指標(biāo) （ 1）衡量數(shù)據(jù)倉庫成功的標(biāo)準(zhǔn)是什么？ （ 2）哪些關(guān)鍵的性能指標(biāo)？如何監(jiān)控？ （ 3）對數(shù)據(jù)倉庫的期望是什么？ （ 4）對數(shù)據(jù)倉庫的預(yù)期用途有哪些？ （ 5）對計劃中的數(shù)據(jù)倉庫的考慮要點(diǎn)是什么？ 數(shù)據(jù)量與更新頻率 （ 1）數(shù)據(jù)倉庫的總數(shù)據(jù)量有多少？ （ 2）決策支持所需的數(shù)據(jù)更新頻率是多少？時間間隔是多長 ? （ 3）每種決策分析與不同時間的標(biāo)準(zhǔn)對比如何？ （ 4）數(shù)據(jù)倉庫中的信息需求的時間界限是什么？ 開發(fā)模型 ? 模型是對現(xiàn)實(shí)世界進(jìn)行抽象的工具。 ? ER圖將 現(xiàn)實(shí)世界 表示成 信息世界 ，便利向計算機(jī)的表示 形式進(jìn)行轉(zhuǎn)化。 選擇或設(shè)計反映決策主題業(yè)務(wù)的表，如在“商品”主題中，以“銷售業(yè)務(wù)”作為事實(shí)表。在事實(shí)表中應(yīng)該記錄哪些屬性是由維表的數(shù)量決定的。 ?
物理相關(guān)推薦
鄂ICP備17016276號-1