數(shù)據(jù)倉(cāng)庫(kù)的概念與體系結(jié)構(gòu)-展示頁(yè)
2025-03-10 23:00本頁(yè)面
【正文】 數(shù)據(jù)庫(kù)分開維護(hù)。 ? 這個(gè)數(shù)據(jù)中心就叫做 數(shù)據(jù)倉(cāng)庫(kù) 。數(shù)據(jù)倉(cāng)庫(kù)的概念與體系結(jié)構(gòu) 數(shù)據(jù)倉(cāng)庫(kù)的產(chǎn)生 ? 聯(lián)機(jī)事務(wù)處理 系統(tǒng) （ 業(yè)務(wù)系統(tǒng) ） 剛上線時(shí) ， 查詢不到數(shù)據(jù)是因?yàn)閿?shù)據(jù)太少了 ， 而幾十年后查詢不到有關(guān)數(shù)據(jù)是因?yàn)閿?shù)據(jù)太多了 。 ? 針對(duì)這一問題 ， 人們?cè)O(shè)想專門為業(yè)務(wù)數(shù)據(jù)的統(tǒng)計(jì)分析建立一個(gè)數(shù)據(jù)中心 ， 它的數(shù)據(jù)從 聯(lián)機(jī)事務(wù)處理 系統(tǒng)中來 、 從 異構(gòu)的外部數(shù)據(jù)源 來 、 或從 脫機(jī)的歷史業(yè)務(wù)數(shù)據(jù) 中來 ? 這個(gè)數(shù)據(jù)中心也是一個(gè)聯(lián)機(jī)系統(tǒng) ， 它專門為分析統(tǒng)計(jì)和決策支持應(yīng)用服務(wù) ， 通過它可獲取決策支持和聯(lián)機(jī)分析應(yīng)用所需要的一切數(shù)據(jù) 。 簡(jiǎn)單地說 ， 數(shù)據(jù)倉(cāng)庫(kù)就是一個(gè)作為決策支持和聯(lián)機(jī)分析應(yīng)用系統(tǒng)數(shù)據(jù)源的結(jié)構(gòu)化數(shù)據(jù)環(huán)境 ， 數(shù)據(jù)倉(cāng)庫(kù)要研究和解決的問題就是從數(shù)據(jù)庫(kù)中獲取信息的問題 。 – 允許將各種應(yīng)用系統(tǒng)集成在一起，為統(tǒng)一的歷史數(shù)據(jù)分析提供堅(jiān)實(shí)的平臺(tái)，對(duì)信息處理提供支持 ? 數(shù)據(jù)倉(cāng)庫(kù)區(qū)別于其他數(shù)據(jù)存儲(chǔ)系統(tǒng) – “數(shù)據(jù)倉(cāng)庫(kù)是一個(gè)面向主題的、集成的、隨時(shí)間而變化的、不容易丟失的數(shù)據(jù)集合，支持管理部門的決策過程 .”—W. H. Inmon 數(shù)據(jù)倉(cāng)庫(kù)的概念 —教材上的定義 –數(shù)據(jù)倉(cāng)庫(kù)是一個(gè)面向主題的（ Subject Oriented ） 、 集 成 的（ Integrate） 、 相對(duì)穩(wěn)定的 （ NonVolatile） 、 反映歷史變化 （ Time Variant） 的數(shù)據(jù)集合 ， 通常用于輔助決策支持 （ DDS） 數(shù)據(jù)倉(cāng)庫(kù)的發(fā)展 – 以報(bào)表為主 – 以分析為主 – 以預(yù)測(cè)模型為主 – 以營(yíng)運(yùn)導(dǎo)向?yàn)橹? – 以實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)、自動(dòng)決策應(yīng)用為主 數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn) – 面向主題； – 數(shù)據(jù)集成； – 反映歷史變化； – 相對(duì)穩(wěn)定的。 – 排除對(duì)于決策無(wú)用的數(shù)據(jù)，提供特定主題的簡(jiǎn)明視圖。 ? 關(guān)系數(shù)據(jù)庫(kù)，一般文件， 聯(lián)機(jī)事務(wù)處理記錄 ? 使用數(shù)據(jù)清理和數(shù)據(jù)集成技術(shù) 。 – 當(dāng)數(shù)據(jù)被移到數(shù)據(jù)倉(cāng)庫(kù)時(shí)，它們要經(jīng)過轉(zhuǎn)化。 ? 操作數(shù)據(jù)庫(kù)系統(tǒng) : 主要保存當(dāng)前數(shù)據(jù)。 數(shù)據(jù)倉(cāng)庫(kù)關(guān)鍵特征四 ——數(shù)據(jù)不易丟失 ? 盡管數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)來自于操作數(shù)據(jù)庫(kù)，但他們卻是在物理上分離保存的。相對(duì)于傳統(tǒng)數(shù)據(jù)庫(kù)來說，它突出的特點(diǎn)是對(duì)海量數(shù)據(jù)的支持和快速的檢索技術(shù)。對(duì)各種不同的數(shù)據(jù)存儲(chǔ)方式的訪問能力是數(shù)據(jù)抽取工具的關(guān)鍵，數(shù)據(jù)轉(zhuǎn)換通常包括： ? 刪除對(duì)決策分析沒有意義的數(shù)據(jù) ? 轉(zhuǎn)換成統(tǒng)一的數(shù)據(jù)名稱和定義 ? 計(jì)算統(tǒng)計(jì)和衍生數(shù)據(jù) ? 填補(bǔ)缺失數(shù)據(jù) ? 統(tǒng)一不同的數(shù)據(jù)定義方式 元數(shù)據(jù) – 元數(shù)據(jù)是描述數(shù)據(jù)倉(cāng)庫(kù)內(nèi)數(shù)據(jù)的結(jié)構(gòu)和建立方法的數(shù)據(jù)。 – 在關(guān)系數(shù)據(jù)庫(kù)中，數(shù)據(jù)是存放在表中的，表結(jié)構(gòu)的定義、關(guān)于結(jié)構(gòu)的描述就是元數(shù)據(jù)。 – 元數(shù)據(jù)分為： ? 技術(shù)元數(shù)據(jù) ? 業(yè)務(wù)元數(shù)據(jù) 技術(shù)元數(shù)據(jù) – 技術(shù)元數(shù)據(jù)是系統(tǒng)的開發(fā)和管理人員使用的、描述數(shù)據(jù)的技術(shù)細(xì)節(jié)的元數(shù)據(jù)。 – 業(yè)務(wù)元數(shù)據(jù)主要包括： ? 用戶的業(yè)務(wù)術(shù)語(yǔ)和它們表達(dá)的數(shù)據(jù)模型信息 ? 對(duì)象名稱及其屬性 ? 數(shù)據(jù)的來源信息和數(shù)據(jù)訪問的規(guī)則信息。 – 在數(shù)據(jù)倉(cāng)庫(kù)中，元數(shù)據(jù)的主要用途包括： ? 用作目錄，幫助決策支持系統(tǒng)分析者對(duì)數(shù)據(jù)倉(cāng)庫(kù)的 內(nèi)容定義 ? 作為數(shù)據(jù)倉(cāng)庫(kù)和操作性數(shù)據(jù)庫(kù)之間進(jìn)行數(shù)據(jù)轉(zhuǎn)換時(shí)的 映射標(biāo)準(zhǔn) ? 幫助業(yè)務(wù)人員和技術(shù)人員更好地理解當(dāng)前業(yè)務(wù)和系統(tǒng)數(shù)據(jù) ? 提高系統(tǒng)的管理效率。 數(shù)據(jù)集市 ? 數(shù)據(jù)集市 (Data Mart) ，也叫數(shù)據(jù)市場(chǎng)。 – 在分析、內(nèi)容、表現(xiàn)，以及易用性方面迎合專業(yè)用戶群體的特殊需求。 數(shù)據(jù)倉(cāng)庫(kù)的組成 ? 數(shù)據(jù)倉(cāng)庫(kù)管理 – 數(shù)據(jù)倉(cāng)庫(kù)管理包括安全與權(quán)限管理、數(shù)據(jù)更新跟蹤、數(shù)據(jù)質(zhì)量檢查、元數(shù)據(jù)的管理與更新、數(shù)據(jù)倉(cāng)庫(kù)使用狀態(tài)的檢測(cè)與審計(jì)、數(shù)據(jù)復(fù)制與刪除、數(shù)據(jù)分割與分發(fā)、數(shù)據(jù)備份與恢復(fù)、數(shù)據(jù)存儲(chǔ)管理等?；?Web的信息發(fā)布系統(tǒng)是當(dāng)前流行的多用戶訪問的最有效方法。 – 內(nèi)部信息，例如存于操作型數(shù)據(jù)庫(kù)中的各種業(yè)務(wù)數(shù)據(jù)和辦公自動(dòng)化系統(tǒng)中包含的各類文檔數(shù)據(jù)； – 外部數(shù)據(jù)，例如各類法律法規(guī)、市場(chǎng)信息、競(jìng)爭(zhēng)對(duì)手的信息以及各類外部統(tǒng)計(jì)數(shù)據(jù)及其它有關(guān)文檔等。 ? 存儲(chǔ) – 在現(xiàn)有各業(yè)務(wù)系統(tǒng)的基礎(chǔ)上，對(duì)數(shù)據(jù)進(jìn)行抽取、清理、并有效集成，按照主題進(jìn)行重新組織，最終確定數(shù)據(jù)倉(cāng)庫(kù)的物理存儲(chǔ)結(jié)構(gòu)，同時(shí)組織存儲(chǔ)數(shù)據(jù)倉(cāng)庫(kù)的元數(shù)據(jù)（ 包括數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)字典、記錄系統(tǒng)定義、數(shù)據(jù)轉(zhuǎn)換規(guī)則、數(shù)據(jù)加載頻率以及業(yè)務(wù)規(guī)則等信息 ）。 OLAP服務(wù)器 ? OLAP（聯(lián)機(jī)分析處理）是針對(duì)某個(gè)特定的主題進(jìn)行聯(lián)機(jī)數(shù)據(jù)訪問、處理、分析，通過直觀的方式，從多個(gè)維度、多種數(shù)據(jù)綜合度進(jìn)行分析，并將結(jié)果呈現(xiàn)給使用者。 前端工具與應(yīng)用 ? 前端工具主要包括各種數(shù)據(jù)分析工具、報(bào)表工具、查詢工具、 數(shù)據(jù)挖掘工具（例如關(guān)聯(lián)分析、分類、預(yù)測(cè)等） 以及各種基于數(shù)據(jù)倉(cāng)庫(kù)或數(shù)據(jù)集市開發(fā)的應(yīng)用。 ? OLTP是 傳統(tǒng)的關(guān)系型數(shù)據(jù)庫(kù)的主要應(yīng)用 ，主要是基本的、日常的事務(wù)處理，例如銀行交易。在進(jìn)行事務(wù)處理的同時(shí)，積累了大量的數(shù)據(jù)，傳統(tǒng)決策支持系統(tǒng)一般就建立在這種事務(wù)處理環(huán)境上。 ? 結(jié)果就是將事務(wù)處理系統(tǒng)和分析處理系統(tǒng)分離，建立兩個(gè)獨(dú)立的系統(tǒng)。 這樣做的最大優(yōu)點(diǎn)是可以即時(shí)隨地處理輸入的數(shù)據(jù)，及時(shí)回答。 ? 衡量聯(lián)機(jī)事務(wù)處理系統(tǒng)的一個(gè)重要性能指標(biāo)是系統(tǒng)性能，具體體現(xiàn)為 實(shí)時(shí)響應(yīng)時(shí)間 (Response Time) ? 特點(diǎn) – OLTP支持大量并發(fā)用戶定期添加和修改數(shù)據(jù) – 反映隨時(shí)變化的單位狀態(tài)，但不保存其歷史記錄 – 具有復(fù)雜的結(jié)構(gòu)。 ? 數(shù)據(jù)倉(cāng)庫(kù)最重要的特性是數(shù)據(jù)集成，目的是有效信息數(shù)據(jù)的呈現(xiàn)。 ? 典型的
環(huán)評(píng)公示相關(guān)推薦
鄂ICP備17016276號(hào)-1