數據倉庫設計與開發(fā)培訓課件-免費閱讀
【正文】 ? 數據倉庫內存儲了很長時間范圍內的數據 —— 從 5年到 10年；多維 DBMS中存儲著比較短時間范圍內的數據。 數據倉庫的測試 ? 單元測試 ? 單元測試的目的是尋找出存在于單個程序、存儲過程和其它位于一些獨立環(huán)境中模塊的錯誤。 數據倉庫的實施 ? 實施過程中需要完成的工作： ? 建立數據倉庫與業(yè)務處理系統(tǒng)的接口 ? 數據倉庫的體系結構建立 ? 實現數據倉庫物理倉庫與元數據庫 ? 進行數據倉庫的數據初次加載 ? 完成數據倉庫的中間件設計 ? 進行數據倉庫的測試。 ? 按 Bit— Wise檢索 ：對于 10M個記錄建立三列的Bit— Wise索引。一個文件包括很多塊，每個塊包括若干條記錄。 ? 了解外部存儲設備的特征。 確定數據分割策略 ? 把邏輯上整體的數據分割成較小的、可以獨立管理的物理單元進行存儲 。根據系統(tǒng)使用的 DBMS，確定事實表和維表的具體實現。 銷售數據和維 銷售數據 商品 促銷 時間 部門 城市 地區(qū) 商店 概念模型到邏輯模型的轉換 ? 星型模型的設計步驟如下： （ 4）確定數據匯總水平。 ? 商品有如下屬性組： ? 商品的固有信息（商品號、商品名、類別、價格等）； ? 商品庫存信息（商品號、庫房號、庫存量、日期等）； ? 商品銷售信息（商品號、客戶號、銷售量等）； ? 客戶有如下屬性組： ? 客戶固有信息（客戶號、客戶名、住址、電話等）； ? 客戶購物信息（客戶號、商品號、售價、購買量等）。 現實世界 概念世界 邏輯世界 計算機世界 信用 特性 屬性 列（字段、數據項） 張三 個體 實體 記錄 客戶 整體 同質總體 表文件 客戶與產品 整體間聯系 異質總體 數據庫 概念模型設計 ? 概念模型的特點是： ? 能真實反映現實世界，能滿足用戶對數據的分析，達到決策支持的要求，它是現實世界的一個真實模型。 ? 企業(yè)追求的是長期的集成目標，關心的是基于整個企業(yè)的全面解決方案。 用自頂向下方法 ? 建造企業(yè)數據倉庫 ? 建設中心數據模型 ? 一次性的完成數據的重構工作 ? 最小化數據冗余度和不一致性 ? 存儲詳細的歷史數據 ? 從企業(yè)數據倉庫中建造數據集市 ? 得到大部分的集成數據 ? 直接依賴于數據倉庫的可用性 ? 問題 ? 投資效益的時間 ? ? 建設中心數據模型的必要性和可能性 ? ? 初始費用 ? 數據集市 外部數據 數據集市 操作數據 企業(yè)數據倉庫 用自底向上方法 ? 建立部門數據集市 ? 限制在一個主題區(qū)域 ? 快速投資收益 ? 區(qū)域自治 – 設計的可伸縮性強 ? 對相關部門的應用容易復制 ? 對每個數據集市需要數據重構 ? 存在一定的冗余及不一致性 ? 逐步擴展到企業(yè)數據倉庫 (EDW) ? 把建造 EDW作為一個長期的目標 ? 存在的問題 : ? 數據集市的數據都是可用的嗎 ? ? 能生成數據模型嗎 ? ? 如何解決不一致性 ? 操作數據 (全局 )/外部數據 企業(yè)數據倉庫 數據集市 操作數據 (局部 ) 操作數據 (局部 ) 數據集市 采用從頂向下 VS 從底向下 ? 企業(yè)內部、各個業(yè)務部門和各個工作崗位對數據倉庫的理解和期望不同。 ? 自底向上：用于一個數據集市或一個部門的數據倉庫開發(fā) ，容易獲得成功 。以便能把握和管理企業(yè)的經營運行，并對企業(yè)進行業(yè)務重組。 數據倉庫的分析與設計 需求分析 概念模型設計 邏輯模型設計 物理模型設計 數據倉庫的索引技術 需求分析 ? 確定主題域 ? 支持決策的數據來源 ? 數據倉庫的成功標準和關鍵性能指標 ? 數據量與更新頻率 確定主題域 （ 1）明確對于決策分析最有價值的主題領域有哪些？ （ 2）每個主題域的商業(yè)維度是哪些？每個維度的粒度層次有哪些？ （ 3）制定決策的商業(yè)分區(qū)是什么？ （ 4）不同地區(qū)需要哪些信息來制定決策？ （ 5）對哪個區(qū)域提供特定的商品和服務？ 支持決策的數據來源 （ 1）哪些源數據（操作型）與商品主題有關？ （ 2）在已有報表和在線查詢中得到什么樣的信息？ （ 3）提供決策支持的細節(jié)程度是怎樣的？ 數據倉庫的成功標準和關鍵性能指標 （ 1）衡量數據倉庫成功的標準是什么？ （ 2）哪些關鍵的性能指標？如何監(jiān)控？ （ 3）對數據倉庫的期望是什么？ （ 4）對數據倉庫的預期用途有哪些？ （ 5）對計劃中的數據倉庫的考慮要點是什么？ 數據量與更新頻率 （ 1）數據倉庫的總數據量有多少？ （ 2）決策支持所需的數據更新頻率是多少？時間間隔是多長 ? （ 3）每種決策分析與不同時間的標準對比如何？ （ 4）數據倉庫中的信息需求的時間界限是什么？ 開發(fā)模型 ? 模型是對現實世界進行抽象的工具。 ? ER圖將 現實世界 表示成 信息世界 ，便利向計算機的表示 形式進行轉化。 選擇或設計反映決策主題業(yè)務的表，如在“商品”主題中，以“銷售業(yè)務”作為事實表。在事實表中應該記錄哪些屬性是由維表的數量決定的。 ?
物理相關推薦
鄂ICP備17016276號-1