數(shù)據(jù)倉庫的概念與體系結(jié)構(gòu)概述-文庫吧
2025-02-22 22:57 本頁面
【正文】 務(wù)元數(shù)據(jù) 技術(shù)元數(shù)據(jù) – 技術(shù)元數(shù)據(jù)是系統(tǒng)的開發(fā)和管理人員使用的、描述數(shù)據(jù)的技術(shù)細(xì)節(jié)的元數(shù)據(jù)。主要包括： – 數(shù)據(jù)倉庫結(jié)構(gòu)的描述 ? 倉庫模式、視圖、維、層次結(jié)構(gòu)、導(dǎo)出數(shù)據(jù)的定義，以及數(shù)據(jù)集市的位置和內(nèi)容 – 操作元數(shù)據(jù) ? 包括數(shù)據(jù)血統(tǒng) (data lineage)、數(shù)據(jù)類別 (currency of data)，以及監(jiān)視信息 – 匯總用的算法 – 由操作環(huán)境到數(shù)據(jù)倉庫的映射 – 關(guān)于系統(tǒng)性能的數(shù)據(jù) ? 索引，數(shù)據(jù)刷新、更新或復(fù)制事件的調(diào)度和定時(shí) 數(shù)據(jù)倉庫的組成 ? 業(yè)務(wù)元數(shù)據(jù)（商務(wù)元數(shù)據(jù)） – 從業(yè)務(wù)角度描述了系統(tǒng)中的數(shù)據(jù)，是介于使用者和真實(shí)系統(tǒng)之間的語義層，使得不懂計(jì)算機(jī)技術(shù)的業(yè)務(wù)人員也能夠“理解”系統(tǒng)中的數(shù)據(jù)。 – 業(yè)務(wù)元數(shù)據(jù)主要包括： ? 用戶的業(yè)務(wù)術(shù)語和它們表達(dá)的數(shù)據(jù)模型信息 ? 對(duì)象名稱及其屬性 ? 數(shù)據(jù)的來源信息和數(shù)據(jù)訪問的規(guī)則信息。 ? 商務(wù)術(shù)語和定義、數(shù)據(jù)擁有者信息、收費(fèi)政策等 元數(shù)據(jù)的作用 – 元數(shù)據(jù)與數(shù)據(jù)一起，構(gòu)成了數(shù)據(jù)倉庫中的數(shù)據(jù)模型，元數(shù)據(jù)所描述的更多的是這個(gè)模型的結(jié)構(gòu)方面的信息。 – 在數(shù)據(jù)倉庫中，元數(shù)據(jù)的主要用途包括： ? 用作目錄，幫助決策支持系統(tǒng)分析者對(duì)數(shù)據(jù)倉庫的 內(nèi)容定義 ? 作為數(shù)據(jù)倉庫和操作性數(shù)據(jù)庫之間進(jìn)行數(shù)據(jù)轉(zhuǎn)換時(shí)的 映射標(biāo)準(zhǔn) ? 幫助業(yè)務(wù)人員和技術(shù)人員更好地理解當(dāng)前業(yè)務(wù)和系統(tǒng)數(shù)據(jù) ? 提高系統(tǒng)的管理效率。 ? 便于系統(tǒng)集成和可重用 訪問工具 ? 訪問工具 – 訪問工具是為用戶訪問數(shù)據(jù)倉庫提供手段，如數(shù)據(jù)查詢和報(bào)表、應(yīng)用開發(fā)工具、數(shù)據(jù)挖掘工具和數(shù)據(jù)分析工具。 數(shù)據(jù)集市 ? 數(shù)據(jù)集市 (Data Mart) ，也叫數(shù)據(jù)市場(chǎng)。 – 數(shù)據(jù)集市是企業(yè)級(jí)數(shù)據(jù)倉庫的一個(gè)子集 ，是為了特定的應(yīng)用目的，從數(shù)據(jù)倉庫中獨(dú)立出來的一部分?jǐn)?shù)據(jù)，也稱為部門數(shù)據(jù)或主題數(shù)據(jù)。 – 在分析、內(nèi)容、表現(xiàn)，以及易用性方面迎合專業(yè)用戶群體的特殊需求。 – 在數(shù)據(jù)倉庫的實(shí)施過程中，通?？梢詮囊粋€(gè)部分的數(shù)據(jù)集市著手，再逐漸用幾個(gè)數(shù)據(jù)集市組成一個(gè)完整的數(shù)據(jù)倉庫（自底向上）。 數(shù)據(jù)倉庫的組成 ? 數(shù)據(jù)倉庫管理 – 數(shù)據(jù)倉庫管理包括安全與權(quán)限管理、數(shù)據(jù)更新跟蹤、數(shù)據(jù)質(zhì)量檢查、元數(shù)據(jù)的管理與更新、數(shù)據(jù)倉庫使用狀態(tài)的檢測(cè)與審計(jì)、數(shù)據(jù)復(fù)制與刪除、數(shù)據(jù)分割與分發(fā)、數(shù)據(jù)備份與恢復(fù)、數(shù)據(jù)存儲(chǔ)管理等。 ? 信息發(fā)布系統(tǒng) – 信息發(fā)布系統(tǒng)是把數(shù)據(jù)倉庫中的數(shù)據(jù)或其他相關(guān)的數(shù)據(jù)發(fā)送給不同的地點(diǎn)和用戶?；?Web的信息發(fā)布系統(tǒng)是當(dāng)前流行的多用戶訪問的最有效方法。 數(shù)據(jù)倉庫的體系結(jié)構(gòu) 典型的數(shù)據(jù)倉庫系統(tǒng)結(jié)構(gòu) ? 從系統(tǒng)構(gòu)建方面來說，一個(gè)典型的數(shù)據(jù)倉庫系統(tǒng)通常劃分成四個(gè)模塊： – 數(shù)據(jù)源 – 數(shù)據(jù)存儲(chǔ)和管理（數(shù)據(jù)倉庫服務(wù)器） – OLAP服務(wù)器 – 前端工具與應(yīng)用 數(shù)據(jù)倉庫架構(gòu) 數(shù)據(jù)倉庫 提取 清理 轉(zhuǎn)換 裝入 刷新 OLAP服務(wù)器 查詢報(bào)告 分析 數(shù)據(jù)挖掘 監(jiān)控、 整合 元數(shù)據(jù) 存儲(chǔ) 數(shù)據(jù)源 前端工具 輸出 數(shù)據(jù)集市 操作數(shù)據(jù)庫 其他外部信息源 數(shù)據(jù)存儲(chǔ)和管理 OLAP服務(wù)器 數(shù)據(jù)源 ? 數(shù)據(jù)源是數(shù)據(jù)倉庫系統(tǒng)的基礎(chǔ)，即系統(tǒng)的數(shù)據(jù)來源，通常包含企事業(yè)單位的各種內(nèi)部信息和外部信息。 – 內(nèi)部信息，例如存于操作型數(shù)據(jù)庫中的各種業(yè)務(wù)數(shù)據(jù)和辦公自動(dòng)化系統(tǒng)中包含的各類文檔數(shù)據(jù)； – 外部數(shù)據(jù)，例如各類法律法規(guī)、市場(chǎng)信息、競(jìng)爭(zhēng)對(duì)手的信息以及各類外部統(tǒng)計(jì)數(shù)據(jù)及其它有關(guān)文檔等。 數(shù)據(jù)的存儲(chǔ)與管理 ? 數(shù)據(jù)的存儲(chǔ)與管理是整個(gè)數(shù)據(jù)倉庫系統(tǒng)的核心。 ? 存儲(chǔ) – 在現(xiàn)有各業(yè)務(wù)系統(tǒng)的基礎(chǔ)上，對(duì)數(shù)據(jù)進(jìn)行抽取、清理、并有效集成，按照主題進(jìn)行重新組織，最終確定數(shù)據(jù)倉庫的物理存儲(chǔ)結(jié)構(gòu)，同時(shí)組織存儲(chǔ)數(shù)據(jù)倉庫的元數(shù)據(jù)（ 包括數(shù)據(jù)倉庫的數(shù)據(jù)字典、記錄系統(tǒng)定義、數(shù)據(jù)轉(zhuǎn)換規(guī)則、數(shù)據(jù)加載頻率以及業(yè)務(wù)規(guī)則等信息 ）。 ? 管理 – 對(duì)數(shù)據(jù)倉庫系統(tǒng)的管理也就是對(duì)其相應(yīng)數(shù)據(jù)庫系統(tǒng)的管理，通常包括數(shù)據(jù)的安全、歸檔、備份、恢復(fù)等維護(hù)工作。 OLAP服務(wù)器 ? OLAP（聯(lián)機(jī)分析處理）是針對(duì)某個(gè)特定的主題進(jìn)行聯(lián)機(jī)數(shù)據(jù)訪問、處理、分析，通過直觀的方式，從多個(gè)維度、多種數(shù)據(jù)綜合度進(jìn)行分析，并將結(jié)果呈現(xiàn)給使用者。 ? OLAP讓使用者能夠從多角度對(duì)信息進(jìn)行快速、一致、交互地存取。 前端工具與應(yīng)用 ? 前端工具主要包括各種數(shù)據(jù)分析工具、報(bào)表工具、查詢工具、 數(shù)據(jù)挖掘工具（例如關(guān)聯(lián)分析、分類、預(yù)測(cè)等） 以及各種基于數(shù)據(jù)倉庫或數(shù)據(jù)集市開發(fā)的應(yīng)用。 其中： – 數(shù)據(jù)分析 工具主要針對(duì) OLAP服務(wù)器 – 報(bào)表工具、數(shù)據(jù)挖掘工具既可以用于數(shù)據(jù)倉庫，也可針對(duì) OLAP服務(wù)器 OLTP和 OLAP – 聯(lián)機(jī)事務(wù)處理 OLTP（ online transaction processing） – 聯(lián)機(jī)分析處理 OLAP（ OnLine Analytical Processing）。 ? OLTP是 傳統(tǒng)的關(guān)系型數(shù)據(jù)庫的主要應(yīng)用 ，主要是基本的、日常的事務(wù)處理，例如銀行交易。 ? OLAP是 數(shù)據(jù)倉庫系統(tǒng)的主要應(yīng)用 ，支持復(fù)雜的分析操作，側(cè)重決策支持，并且提供直觀易懂的查詢結(jié)果 . 背景 ? 數(shù)據(jù)庫系統(tǒng)作為數(shù)據(jù)管理手段，主要用于事務(wù)處理。在進(jìn)行事務(wù)處理的同時(shí)，積累了大量的數(shù)據(jù)，傳統(tǒng)決策支持系統(tǒng)一般就建立在這種事務(wù)處理環(huán)境上。 ? 數(shù)據(jù)庫技術(shù)一直在盡量勝任事務(wù)處理、批處理到分析處理，雖然在事務(wù)處理應(yīng)用方面取得了成功，但分析處理的支持隨著數(shù)據(jù)的增長(zhǎng)越
環(huán)評(píng)公示相關(guān)推薦
鄂ICP備17016276號(hào)-1