數(shù)據(jù)倉(cāng)庫(kù)技術(shù)簡(jiǎn)介-在線(xiàn)瀏覽
2024-09-09 06:58本頁(yè)面
【正文】 取控制策略。它是數(shù)據(jù)倉(cāng)庫(kù)在運(yùn)行時(shí)的管理信息，記錄數(shù)據(jù)在進(jìn)行層次分析時(shí)的層次位置、現(xiàn)在數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)信息、監(jiān)測(cè)信息（包括使用統(tǒng)計(jì)、錯(cuò)誤報(bào)告等）。虛擬存儲(chǔ)方式是虛擬數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)組織形式。這種方式組織比較簡(jiǎn)單，花費(fèi)少，用戶(hù)使用靈活。而一般數(shù)據(jù)庫(kù)的組織關(guān)系都比較復(fù)雜，數(shù)據(jù)庫(kù)中的數(shù)據(jù)又有許多冗余和沖突的地方。關(guān)系型數(shù)據(jù)倉(cāng)庫(kù)的組織是將數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)存儲(chǔ)在關(guān)系型數(shù)據(jù)庫(kù)的表結(jié)構(gòu)中，在元數(shù)據(jù)的管理下，完成數(shù)據(jù)倉(cāng)庫(kù)的功能。首先要提供一種圖形化的點(diǎn)擊操作界面，讓分析員對(duì)源數(shù)據(jù)庫(kù)的內(nèi)容進(jìn)行選擇，定義多維數(shù)據(jù)模型。多維數(shù)據(jù)庫(kù)的組織是直接面向OLAP分析操作的數(shù)據(jù)組織形式。其數(shù)據(jù)組織采用多維數(shù)據(jù)結(jié)構(gòu)文件存儲(chǔ)數(shù)據(jù)，相應(yīng)有維索引及相應(yīng)的元數(shù)據(jù)管理文件與數(shù)據(jù)相對(duì)應(yīng)。大多數(shù)數(shù)據(jù)倉(cāng)庫(kù)都采用星型模型來(lái)表示多維概念模型。事實(shí)表中的每條元組都包括保證多維關(guān)系的指向各個(gè)維表的外鍵和一些相應(yīng)的測(cè)量數(shù)據(jù)。星型模型使OLAP的復(fù)雜查詢(xún)可以直接通過(guò)各維的層次，執(zhí)行比較、上鉆、下鉆等操作。預(yù)綜合數(shù)據(jù)的組織可以有兩種形式：增加概括表方式和使用多重編碼的方式。但這種數(shù)據(jù)組織方式是主流方案，大多數(shù)現(xiàn)存數(shù)據(jù)倉(cāng)庫(kù)集成方案都采用這種形式。例如下面的這種組織方式，可以說(shuō)明多維數(shù)據(jù)庫(kù)的數(shù)據(jù)組織：用于分析的數(shù)據(jù)從關(guān)系數(shù)據(jù)庫(kù)或關(guān)系數(shù)據(jù)倉(cāng)庫(kù)中抽取出來(lái)，被存放到多維數(shù)據(jù)庫(kù)的超立方結(jié)構(gòu)中—多維體。相應(yīng)各維有一定的記錄維及維內(nèi)層次的元數(shù)據(jù)結(jié)構(gòu)。當(dāng)使用多維數(shù)據(jù)庫(kù)作為數(shù)據(jù)倉(cāng)庫(kù)的基本數(shù)據(jù)存儲(chǔ)形式時(shí)，最主要的缺點(diǎn)是使以維為基本框架的存儲(chǔ)空間大大減少，針對(duì)多維數(shù)據(jù)組織的操作算法，大大提高了多維分析操作的效率。3）、兩種數(shù)據(jù)組織的等價(jià)性關(guān)系數(shù)據(jù)庫(kù)和多維數(shù)據(jù)庫(kù)兩種數(shù)據(jù)組織方法可以構(gòu)成等價(jià)的多維數(shù)據(jù)模型。數(shù)據(jù)的存儲(chǔ)同樣是有層次性的。采用什么樣的存儲(chǔ)方式（即前面提到了關(guān)系數(shù)據(jù)庫(kù)、多維數(shù)據(jù)庫(kù)兩種形式）是物理數(shù)據(jù)組織的最高層，它們都能實(shí)現(xiàn)對(duì)多維數(shù)據(jù)模型的存儲(chǔ)。數(shù)據(jù)的具體物理存儲(chǔ)（如數(shù)據(jù)文件的結(jié)構(gòu)、索引、編碼等技術(shù)的采用）是物理存儲(chǔ)的最底層技術(shù)和方法。4）、虛擬數(shù)據(jù)倉(cāng)庫(kù)虛擬數(shù)據(jù)倉(cāng)庫(kù)（Virtual Data Warehouse），即構(gòu)造一個(gè)透明的訪(fǎng)問(wèn)機(jī)制（Demand Driven）,使用戶(hù)以習(xí)慣的方式及時(shí)、直接地訪(fǎng)問(wèn)大型企業(yè)數(shù)據(jù)庫(kù)。因此這種方法最終會(huì)使提取和維護(hù)大量數(shù)據(jù)的開(kāi)銷(xiāo)最小。虛擬數(shù)據(jù)倉(cāng)庫(kù)是在應(yīng)用層上進(jìn)行研究的，其組織形式是用原有的關(guān)系表模擬多維數(shù)據(jù)。由于采用虛擬的方式，無(wú)需建立大量的數(shù)據(jù)存儲(chǔ)，虛擬的數(shù)據(jù)訪(fǎng)問(wèn)方式著眼于最終用戶(hù)對(duì)數(shù)據(jù)的直接訪(fǎng)問(wèn)，其特點(diǎn)在于用戶(hù)可以直接訪(fǎng)問(wèn)數(shù)據(jù)而無(wú)需做大量的分析和結(jié)構(gòu)映射。一般數(shù)據(jù)倉(cāng)庫(kù)的結(jié)構(gòu)組成包括當(dāng)前基本數(shù)據(jù)、歷史基本數(shù)據(jù)、輕度綜合數(shù)據(jù)、高度綜合數(shù)據(jù)、元數(shù)據(jù)。當(dāng)前基本數(shù)據(jù)隨時(shí)間的推移，由數(shù)據(jù)倉(cāng)庫(kù)的時(shí)間控制機(jī)制轉(zhuǎn)為歷史基本數(shù)據(jù)，一般被轉(zhuǎn)存于一些轉(zhuǎn)換介質(zhì)中，如磁帶等。最高一層的數(shù)據(jù)十分精練，是一種準(zhǔn)決策數(shù)據(jù)。整個(gè)系統(tǒng)包括從操作數(shù)據(jù)庫(kù)和外部其他數(shù)據(jù)源的提取、轉(zhuǎn)換工具、數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)部分（主要指構(gòu)成數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)存儲(chǔ)的數(shù)據(jù)庫(kù)和數(shù)據(jù)倉(cāng)庫(kù)管理系統(tǒng)）、基于數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)分析工具以及與以上各部分相關(guān)的管理綜合部件，構(gòu)成了整個(gè)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)。管理、維護(hù)數(shù)據(jù)倉(cāng)庫(kù)的正常工作，即完成數(shù)據(jù)倉(cāng)庫(kù)服務(wù)器的管理，接受用戶(hù)查詢(xún)數(shù)據(jù)的請(qǐng)求，使數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)與操作數(shù)據(jù)庫(kù)中的數(shù)據(jù)保持有效同步等工作。：圖2 數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的總體結(jié)構(gòu)從圖中可以看出數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)包括以下內(nèi)容：252。252。252。252。這樣，整個(gè)數(shù)據(jù)倉(cāng)庫(kù)的組織大致分為三個(gè)部分：數(shù)據(jù)在進(jìn)入數(shù)據(jù)倉(cāng)庫(kù)的存儲(chǔ)體之前，包括源數(shù)據(jù)庫(kù)、外部數(shù)據(jù)文件的清洗、變換、裝載和刷新的工具，這是第一部分。第三部分是基于數(shù)據(jù)倉(cāng)庫(kù)的查詢(xún)工具，主要包括數(shù)學(xué)統(tǒng)計(jì)分析、OLAP查詢(xún)和數(shù)據(jù)開(kāi)采三類(lèi)工具。這部分要完成清洗、變換和集成數(shù)據(jù)，將數(shù)據(jù)裝載到數(shù)據(jù)倉(cāng)庫(kù)中，定期清理數(shù)據(jù)倉(cāng)庫(kù)，消除數(shù)據(jù)倉(cāng)庫(kù)與源數(shù)據(jù)庫(kù)的不一致，清除失效數(shù)據(jù)等。而且，這一部分的程序可能是數(shù)據(jù)倉(cāng)庫(kù)中最難管理的，并且有可能是各類(lèi)軟件組成的集成體。數(shù)據(jù)倉(cāng)庫(kù)中數(shù)據(jù)的存儲(chǔ)和管理由多維數(shù)據(jù)視圖來(lái)表現(xiàn)，是元數(shù)據(jù)的最主要部分。數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)是為決策支持服務(wù)的，在數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)存儲(chǔ)建立以后，用戶(hù)可以使用系統(tǒng)提供的多分析工具完成對(duì)數(shù)據(jù)的操作，獲取個(gè)人需要的信息。由于數(shù)據(jù)倉(cāng)庫(kù)的這種工程性，因而在技術(shù)上可以根據(jù)它的工作過(guò)程分為：數(shù)據(jù)的抽取、存儲(chǔ)和管理、數(shù)據(jù)的表現(xiàn)以及數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)的技術(shù)咨詢(xún)四個(gè)方面。由于數(shù)據(jù)倉(cāng)庫(kù)是一個(gè)獨(dú)立的數(shù)據(jù)環(huán)境，它需要通過(guò)抽取過(guò)程將數(shù)據(jù)從聯(lián)機(jī)事務(wù)處理系統(tǒng)、外部數(shù)據(jù)源、脫機(jī)的數(shù)據(jù)存儲(chǔ)介質(zhì)中導(dǎo)入到數(shù)據(jù)倉(cāng)庫(kù)。數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)并不要求與聯(lián)機(jī)事務(wù)處理系統(tǒng)保持實(shí)時(shí)的同步，因此數(shù)據(jù)抽取可以定時(shí)進(jìn)行，但多個(gè)抽取操作執(zhí)行的時(shí)間、相互的順序、成敗對(duì)數(shù)據(jù)倉(cāng)庫(kù)中信息的有效性則至關(guān)重要。目前市場(chǎng)上所提供的大多是數(shù)據(jù)抽取工具。但數(shù)據(jù)抽取工具支持的數(shù)據(jù)種類(lèi)是有限的；同時(shí)數(shù)據(jù)抽取
黨政相關(guān)相關(guān)推薦
鄂ICP備17016276號(hào)-1