數(shù)據(jù)倉庫與數(shù)據(jù)挖掘2-2-文庫吧在線文庫
【正文】 面向應(yīng)用數(shù)據(jù)庫 1月份數(shù)據(jù) 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 56 ?連續(xù)結(jié)構(gòu) ?它是通過比較兩個連續(xù)的簡單直接文件的不同而生成的另一種連續(xù)文件，生成的連續(xù)文件又可以和新的簡單直接文件一起生成新的連續(xù)文件 。按這種方式存儲的數(shù)據(jù)細(xì)節(jié)化程度很高，可以應(yīng)付多種細(xì)節(jié)查詢，但分析時查詢的效率較低。 ? 如果沒有元數(shù)據(jù)，那么數(shù)據(jù)倉庫就像這個文件柜； ? 可能裝滿了很多對你的用戶、開發(fā)者及管理者很有用的信息，但是，卻沒有任何簡便的方法知道這些信息在哪里，這樣一來，數(shù)據(jù)倉庫的價值就很有限。 ?元數(shù)據(jù)部分與電話黃頁的作用類似，它是數(shù)據(jù)倉庫內(nèi)容的一本字典。本例中指銷售 量。 ?例如： —一個銷售系統(tǒng)中的數(shù)據(jù)可分為時間維、產(chǎn)品維和地理位置維等； 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 27 ?一個數(shù)據(jù)立方體，比如數(shù)據(jù)倉庫 sales,允許以多維對數(shù)據(jù)進(jìn)行建模和觀察。 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 20 ?分區(qū) 數(shù)據(jù)分區(qū) 小的數(shù)據(jù)單元易于： ?重構(gòu) ?索引 ?順序掃描 ?重組 ?恢復(fù) ?監(jiān)控 1989 1990 1987 1991 1988 獨立管理的數(shù)據(jù)單元可以有不同的定義 處理設(shè)備 A 處理設(shè)備 B 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 21 ? 分區(qū) ? 有多種數(shù)據(jù)分區(qū)的標(biāo)準(zhǔn)： — 時間 — 業(yè)務(wù)范圍 — 地理位置 — 組織單位 — 所有上述標(biāo)準(zhǔn) ?數(shù)據(jù)分區(qū)的標(biāo)準(zhǔn)是完全由開發(fā)人員來決定的。 ? 樣本數(shù)據(jù)庫的粒度：是根據(jù) 采樣率的高低 來劃分的，采樣粒度不同的樣本數(shù)據(jù)庫可以具有相同的綜合級別，它是 按一定的采樣率從細(xì)節(jié)數(shù)據(jù)庫或輕度綜合數(shù)據(jù)庫中提取的一個子集。 — 高度綜合級的數(shù)據(jù)內(nèi)容十分精練，可以認(rèn)為是一種“準(zhǔn)決策數(shù)據(jù)”。 — 為了有效控制數(shù)據(jù)倉庫中當(dāng)前細(xì)節(jié)級數(shù)據(jù)的規(guī)模，保證系統(tǒng)的運行效率，在設(shè)計數(shù)據(jù)倉庫時，通常應(yīng)結(jié)合業(yè)務(wù)的特點和系統(tǒng)硬件的水平，設(shè)定一個合理的時間閥值，將老化的數(shù)據(jù)轉(zhuǎn)為早期細(xì)節(jié)級的數(shù)據(jù)，并以合適的方式進(jìn)行存儲。 4 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 ?數(shù)據(jù)倉庫的數(shù)據(jù)組織結(jié)構(gòu)不同于一般的數(shù)據(jù)庫系統(tǒng)，需要將從原有的業(yè)務(wù)數(shù)據(jù)庫中獲得的基本數(shù)據(jù)和綜合數(shù)據(jù)分成一些不同的級別。 — 這一設(shè)定的時間段參數(shù)又稱為“粒度”。在數(shù)據(jù)倉庫中的數(shù)據(jù)量大小與所能回答查詢的細(xì)節(jié)級別之間要做出權(quán)衡。因為運行維護(hù)人員和設(shè)計者在管理小的物理單元時比管理大的享有更大的靈活性。 ?同時，數(shù)據(jù)倉庫中的維還可以作為數(shù)據(jù)倉庫操作過程的路經(jīng)，這些路徑通常位于維的不同層次結(jié)構(gòu)中。 本例中涉及 time,item, location。 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 34 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 35 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 36 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 ?將元數(shù)據(jù)看作是電話黃頁。 40 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 對構(gòu)建數(shù)據(jù)倉庫的必要性 ? 數(shù)據(jù)抽取和數(shù)據(jù)轉(zhuǎn)換 ?源系統(tǒng)及其數(shù)據(jù)結(jié)構(gòu) ?數(shù)據(jù)倉庫的結(jié)構(gòu)及數(shù)據(jù)內(nèi)容 ?數(shù)據(jù)映射及數(shù)據(jù)轉(zhuǎn)換 ?我們需要源系統(tǒng)的元數(shù)據(jù)，源系統(tǒng)到目標(biāo)系統(tǒng)的映射，以及數(shù)據(jù)轉(zhuǎn)換的規(guī)則。 ? 以下是按順序排列的后端處理過程的列表 ?數(shù)據(jù)源結(jié)構(gòu)定義； ?數(shù)據(jù)抽??； ?初始重格式化 /合并 ?初步數(shù)據(jù)清洗 ?數(shù)據(jù)轉(zhuǎn)換 /合并 ?有效性和質(zhì)量檢查 ?數(shù)據(jù)倉庫結(jié)構(gòu)定義 ?創(chuàng)建裝載映像 46 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 ? 按照數(shù)據(jù)倉庫功能區(qū)域劃分的元數(shù)據(jù)類型 ? 數(shù)據(jù)源數(shù)據(jù) 1. 數(shù)據(jù)源存儲平臺 2. 數(shù)據(jù)源的數(shù)據(jù)格式 3. 數(shù)據(jù)源的業(yè)務(wù)內(nèi)容說明； 4. 數(shù)據(jù)源的所有者 5. 數(shù)據(jù)源的訪問方法及使用限制； 6. 實施數(shù)據(jù)抽取的工具和其他方法，及相應(yīng)的參數(shù)設(shè)置； 7. 數(shù)據(jù)抽取的進(jìn)度安排； 8. 實際數(shù)據(jù)抽取的時間、內(nèi)容及完成情況記錄； 47 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 ? 按照數(shù)據(jù)倉庫功能區(qū)域劃分的元數(shù)據(jù)類型 ? 數(shù)據(jù)的預(yù)處理 ? 數(shù)據(jù)抽取、轉(zhuǎn)換、裝載過程中用到的各種文件定義； ? 從數(shù)據(jù)源到主題數(shù)據(jù)實際視圖之間的數(shù)據(jù)對應(yīng)關(guān)系，有關(guān)數(shù)據(jù)凈化的詳細(xì)規(guī)則； ? 為了滿足數(shù)據(jù)挖掘需要進(jìn)行的數(shù)據(jù)處理的詳細(xì)說明； ? 維表各屬性的更新策略選擇； ? 代理碼的分配情況； ? 數(shù)據(jù)聚集的定義； ? 預(yù)處理數(shù)據(jù)的備份方法； 48 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 ? 按照數(shù)據(jù)倉庫功能區(qū)域劃分的元數(shù)據(jù)類型 ? 數(shù)據(jù)倉庫主題 ? 各種數(shù)據(jù)庫表或視圖的定義 ? 數(shù)據(jù)庫分區(qū)的設(shè)置； ? 索引的建立方法； ? 數(shù)據(jù)庫訪問權(quán)限分配； ? 數(shù)據(jù)庫備份方案； 49 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 ? 按照數(shù)據(jù)倉庫功能區(qū)域劃分的元數(shù)據(jù)類型 ? 查詢服務(wù) ? 數(shù)據(jù)庫表及表中數(shù)據(jù)項的業(yè)務(wù)含義說明； ? 可視化查詢結(jié)果格式的定義； ? 用戶及其訪問權(quán)限的定義； ? 數(shù)據(jù)倉庫使用情況的監(jiān)控與統(tǒng)計； 50 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 ? 也可以將原數(shù)據(jù)分為管理元數(shù)據(jù)和用戶元數(shù)據(jù)； ? 管理元數(shù)據(jù) ? 用于創(chuàng)建和維護(hù)數(shù)據(jù)倉庫。 1 月份數(shù)據(jù)2 月份數(shù)據(jù)綜合連續(xù)結(jié)構(gòu)文件J Adams Main大街 P Anderson High 大街 456號 K Appleby A大街 10號 L Azimoff 被農(nóng)場路 64號 J Adams Main大街 W Abraham 9號公路 12號 P Anderson Tincup郡 14號 K Appleby A大街 10號 J Adams Main大街 1 月 —今 W Abraham 9號公路 12號 2月 —今 P Anderson High大街 456號 1月 —1月 P Anderson Tincup郡 14號
環(huán)評公示相關(guān)推薦
鄂ICP備17016276號-1