數(shù)據(jù)倉(cāng)庫(kù)的概念與體系結(jié)構(gòu)概述-預(yù)覽頁(yè)
【正文】 立即傳送到計(jì)算中心進(jìn)行處理，并在很短的時(shí)間內(nèi)給出處理結(jié)果。 ? OLAP是 數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的主要應(yīng)用 ，支持復(fù)雜的分析操作，側(cè)重決策支持，并且提供直觀易懂的查詢(xún)結(jié)果 . 背景 ? 數(shù)據(jù)庫(kù)系統(tǒng)作為數(shù)據(jù)管理手段，主要用于事務(wù)處理。 ? OLAP讓使用者能夠從多角度對(duì)信息進(jìn)行快速、一致、交互地存取。 數(shù)據(jù)的存儲(chǔ)與管理 ? 數(shù)據(jù)的存儲(chǔ)與管理是整個(gè)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的核心。 ? 信息發(fā)布系統(tǒng) – 信息發(fā)布系統(tǒng)是把數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)或其他相關(guān)的數(shù)據(jù)發(fā)送給不同的地點(diǎn)和用戶(hù)。 – 數(shù)據(jù)集市是企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù)的一個(gè)子集 ，是為了特定的應(yīng)用目的，從數(shù)據(jù)倉(cāng)庫(kù)中獨(dú)立出來(lái)的一部分?jǐn)?shù)據(jù)，也稱(chēng)為部門(mén)數(shù)據(jù)或主題數(shù)據(jù)。 ? 商務(wù)術(shù)語(yǔ)和定義、數(shù)據(jù)擁有者信息、收費(fèi)政策等 元數(shù)據(jù)的作用 – 元數(shù)據(jù)與數(shù)據(jù)一起，構(gòu)成了數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)模型，元數(shù)據(jù)所描述的更多的是這個(gè)模型的結(jié)構(gòu)方面的信息。在數(shù)據(jù)倉(cāng)庫(kù)中，元數(shù)據(jù)就是定義數(shù)據(jù)倉(cāng)庫(kù)對(duì)象的數(shù)據(jù)。 數(shù)據(jù)抽取工具 – 數(shù)據(jù)抽取工具把數(shù)據(jù)從各種各樣的存儲(chǔ)環(huán)境中提取出來(lái)，進(jìn)行必要的轉(zhuǎn)化、整理，再存放到數(shù)據(jù)倉(cāng)庫(kù)中。 ? 數(shù)據(jù)倉(cāng)庫(kù) :從歷史的角度提供信息（比如過(guò)去 510 年） – 數(shù)據(jù)倉(cāng)庫(kù)中的每一個(gè)關(guān)鍵結(jié)構(gòu)都隱式或顯式地包含時(shí)間元素，而操作數(shù)據(jù)庫(kù)中的關(guān)鍵結(jié)構(gòu)可能就不包括時(shí)間元素。 – 確保命名約定、編碼結(jié)構(gòu)、屬性度量等的一致性。 數(shù)據(jù)倉(cāng)庫(kù)關(guān)鍵特征一 ——面向主題 ? 面向主題，是數(shù)據(jù)倉(cāng)庫(kù)顯著區(qū)別于關(guān)系數(shù)據(jù)庫(kù)系統(tǒng)的一個(gè)特征 – 圍繞一些主題，如顧客、供應(yīng)商、產(chǎn)品等 – 關(guān)注決策者的數(shù)據(jù)建模與分析，而不是集中于組織機(jī)構(gòu)的日常操作和事務(wù)處理。 ? 這個(gè)數(shù)據(jù)中心就叫做 數(shù)據(jù)倉(cāng)庫(kù) 。 ? 針對(duì)這一問(wèn)題 ， 人們?cè)O(shè)想專(zhuān)門(mén)為業(yè)務(wù)數(shù)據(jù)的統(tǒng)計(jì)分析建立一個(gè)數(shù)據(jù)中心 ， 它的數(shù)據(jù)從 聯(lián)機(jī)事務(wù)處理 系統(tǒng)中來(lái) 、 從 異構(gòu)的外部數(shù)據(jù)源 來(lái) 、 或從 脫機(jī)的歷史業(yè)務(wù)數(shù)據(jù) 中來(lái) ? 這個(gè)數(shù)據(jù)中心也是一個(gè)聯(lián)機(jī)系統(tǒng) ， 它專(zhuān)門(mén)為分析統(tǒng)計(jì)和決策支持應(yīng)用服務(wù) ， 通過(guò)它可獲取決策支持和聯(lián)機(jī)分析應(yīng)用所需要的一切數(shù)據(jù) 。 – 允許將各種應(yīng)用系統(tǒng)集成在一起，為統(tǒng)一的歷史數(shù)據(jù)分析提供堅(jiān)實(shí)的平臺(tái)，對(duì)信息處理提供支持 ? 數(shù)據(jù)倉(cāng)庫(kù)區(qū)別于其他數(shù)據(jù)存儲(chǔ)系統(tǒng) – “數(shù)據(jù)倉(cāng)庫(kù)是一個(gè)面向主題的、集成的、隨時(shí)間而變化的、不容易丟失的數(shù)據(jù)集合，支持管理部門(mén)的決策過(guò)程 .”—W. H. Inmon 數(shù)據(jù)倉(cāng)庫(kù)的概念 —教材上的定義 –數(shù)據(jù)倉(cāng)庫(kù)是一個(gè)面向主題的（ Subject Oriented ） 、 集 成 的（ Integrate） 、 相對(duì)穩(wěn)定的 （ NonVolatile） 、 反映歷史變化 （ Time Variant） 的數(shù)據(jù)集合 ， 通常用于輔助決策支持 （ DDS） 數(shù)據(jù)倉(cāng)庫(kù)的發(fā)展 – 以報(bào)表為主 – 以分析為主 – 以預(yù)測(cè)模型為主 – 以營(yíng)運(yùn)導(dǎo)向?yàn)橹? – 以實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)、自動(dòng)決策應(yīng)用為主 數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn) – 面向主題； – 數(shù)據(jù)集成； – 反映歷史變化； – 相對(duì)穩(wěn)定的。 ? 關(guān)系數(shù)據(jù)庫(kù)，一般文件， 聯(lián)機(jī)事務(wù)處理記錄 ? 使用數(shù)據(jù)清理和數(shù)據(jù)集成技術(shù) 。 ? 操作數(shù)據(jù)庫(kù)系統(tǒng) : 主要保存當(dāng)前數(shù)據(jù)。相對(duì)于傳統(tǒng)數(shù)據(jù)庫(kù)來(lái)說(shuō)，它突出的特點(diǎn)是對(duì)海量數(shù)據(jù)的支持和快速的檢索技術(shù)。 – 在關(guān)系數(shù)據(jù)庫(kù)中，數(shù)據(jù)是存放在表中的，表結(jié)構(gòu)的定義、關(guān)于結(jié)構(gòu)的描述就是元數(shù)據(jù)。 – 業(yè)務(wù)元數(shù)據(jù)主要包括： ? 用戶(hù)的業(yè)務(wù)術(shù)語(yǔ)和它們表達(dá)的數(shù)據(jù)模型信息 ? 對(duì)象名稱(chēng)及其屬性 ? 數(shù)據(jù)的來(lái)源信息和數(shù)據(jù)訪(fǎng)問(wèn)的規(guī)則信息。 數(shù)據(jù)集市 ? 數(shù)據(jù)集市 (Data Mart) ，也叫數(shù)據(jù)市場(chǎng)。 數(shù)據(jù)倉(cāng)庫(kù)的組成 ? 數(shù)據(jù)倉(cāng)庫(kù)管理 – 數(shù)據(jù)倉(cāng)庫(kù)管理包括安全與權(quán)限管理、數(shù)據(jù)更新跟蹤、數(shù)據(jù)質(zhì)量檢查、元數(shù)據(jù)的管理與更新、數(shù)據(jù)倉(cāng)庫(kù)使用狀態(tài)的檢測(cè)與審計(jì)、數(shù)據(jù)復(fù)制與刪除、數(shù)據(jù)分割與分發(fā)、數(shù)據(jù)備份與恢復(fù)、數(shù)據(jù)存儲(chǔ)管理等。 – 內(nèi)部信息，例如存于操作型數(shù)據(jù)庫(kù)中的各種業(yè)務(wù)數(shù)據(jù)和辦公自動(dòng)化系統(tǒng)中包含的各類(lèi)文檔數(shù)據(jù)； – 外部數(shù)據(jù)，例如各類(lèi)法律法規(guī)、市場(chǎng)信息、競(jìng)爭(zhēng)對(duì)手的信息以及各類(lèi)外部統(tǒng)計(jì)數(shù)據(jù)及其它有關(guān)文檔等。 OLAP服務(wù)器 ? OLAP（聯(lián)機(jī)分析處理）是針對(duì)某個(gè)特定的主題進(jìn)行聯(lián)機(jī)數(shù)據(jù)訪(fǎng)問(wèn)、處理、分析，通過(guò)直觀的方式，從多個(gè)維度、多種數(shù)據(jù)綜合度進(jìn)行分析，并將結(jié)果呈現(xiàn)給使用者。 ? OLTP是 傳統(tǒng)的關(guān)系型數(shù)據(jù)庫(kù)的主要應(yīng)用 ，主要是基本的、日常的事務(wù)處理，例如銀行交易。 ? 結(jié)果就是將事務(wù)處理系統(tǒng)和分析處理系統(tǒng)分離，建立兩個(gè)獨(dú)立的系統(tǒng)。 ? 衡量聯(lián)機(jī)事務(wù)處理系統(tǒng)的一個(gè)重要性能指標(biāo)是系統(tǒng)性能，具體體現(xiàn)為 實(shí)時(shí)響應(yīng)時(shí)間 (Response Time) ? 特點(diǎn) – OLTP支持大量并發(fā)用戶(hù)定期添加和修改數(shù)據(jù) – 反映隨時(shí)變化的單位狀態(tài)，但不保存其歷史記錄 – 具有復(fù)雜的結(jié)構(gòu)。 ? 典型的 OLAP服務(wù)常常源自一個(gè)或多個(gè)專(zhuān)門(mén)設(shè)計(jì)的數(shù)據(jù)集市。在接收用戶(hù)的請(qǐng)求時(shí)， ROLAP服務(wù)器將多維查詢(xún)轉(zhuǎn)換成 SQL查詢(xún)，由數(shù)據(jù)倉(cāng)庫(kù)服務(wù)器對(duì)以關(guān)系形式存放的數(shù)據(jù)執(zhí)行 SQL查詢(xún)，最終將數(shù)據(jù)返回給終端用戶(hù)。 （ 3） 依賴(lài)型數(shù)據(jù)集市和操作型數(shù)據(jù)存儲(chǔ) （ Dependent Data Mart and Operational Data Store） 。 2. 不同源系統(tǒng)中的數(shù)據(jù)在加載到數(shù)據(jù)倉(cāng)庫(kù)之前需要轉(zhuǎn)換和集成，當(dāng)數(shù)據(jù)分段傳輸發(fā)現(xiàn)錯(cuò)誤時(shí)，還要送回源系統(tǒng)進(jìn)行校驗(yàn)糾錯(cuò)。 ETL簡(jiǎn)介 ? 數(shù)據(jù)從源系統(tǒng)加載到數(shù)據(jù)庫(kù)倉(cāng)庫(kù)之前，需要進(jìn)行抽取 E(Extract) 、清洗 C(cleaning)、轉(zhuǎn)換 T(transform)，最后加載 L(load) ，這就是ETL
環(huán)評(píng)公示相關(guān)推薦
鄂ICP備17016276號(hào)-1