數(shù)據(jù)倉庫與數(shù)據(jù)挖掘2-2-在線瀏覽
2025-04-10 09:08本頁面
【正文】 據(jù)必須與事務(wù)型處理及其數(shù)據(jù)相分離，把分析型處理所需要的數(shù)據(jù)從事務(wù)型處理環(huán)境中提取出來，按照分析型處理的要求進(jìn)行重新組織，建立單獨(dú)的分析處理環(huán)境。 ?數(shù)據(jù)倉庫正是構(gòu)建這種新的分析處理環(huán)境而出現(xiàn)的一種數(shù)據(jù)存儲(chǔ)和組織技術(shù)。 ?在數(shù)據(jù)倉庫中，數(shù)據(jù)按照粒度從小到大可分為四個(gè)級(jí)別：早期細(xì)節(jié)級(jí)、當(dāng)前細(xì)節(jié)級(jí)、輕度細(xì)節(jié)級(jí)和高度細(xì)節(jié)級(jí)。 — 為了有效控制數(shù)據(jù)倉庫中當(dāng)前細(xì)節(jié)級(jí)數(shù)據(jù)的規(guī)模，保證系統(tǒng)的運(yùn)行效率，在設(shè)計(jì)數(shù)據(jù)倉庫時(shí)，通常應(yīng)結(jié)合業(yè)務(wù)的特點(diǎn)和系統(tǒng)硬件的水平，設(shè)定一個(gè)合理的時(shí)間閥值，將老化的數(shù)據(jù)轉(zhuǎn)為早期細(xì)節(jié)級(jí)的數(shù)據(jù)，并以合適的方式進(jìn)行存儲(chǔ)。 — 這些數(shù)據(jù)規(guī)模較大，實(shí)時(shí)性強(qiáng)，是數(shù)據(jù)倉庫用戶感興趣的部分。 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 8 ?數(shù)據(jù)倉庫中的數(shù)據(jù)存在著不同的綜合級(jí)別 ?輕度綜合級(jí) — 為了有效控制數(shù)據(jù)倉庫進(jìn)行決策支持時(shí)的系統(tǒng)開銷，對(duì)當(dāng)前細(xì)節(jié)級(jí)的數(shù)據(jù)，通常以一定的 時(shí)間段為單位 進(jìn)行綜合。 — 以較小的粒度生成的綜合數(shù)據(jù)，稱為“輕度綜合級(jí)數(shù)據(jù)”，其規(guī)模要遠(yuǎn)遠(yuǎn)小于當(dāng)前細(xì)節(jié)級(jí)數(shù)據(jù)，因此，可以明顯提高決策運(yùn)算的效率。 — 高度綜合級(jí)的數(shù)據(jù)內(nèi)容十分精練，可以認(rèn)為是一種“準(zhǔn)決策數(shù)據(jù)”。 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 10 數(shù)據(jù)倉庫的數(shù)據(jù)組織結(jié)構(gòu)的一個(gè)例子 高度綜合級(jí) 輕度綜合級(jí) 當(dāng)前細(xì)節(jié)級(jí) 早期細(xì)節(jié)級(jí) 19902023年 每月銷售表 19962023年 每周銷售表 19962023年 銷售情況表 19901995年 銷售明細(xì)表 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 11 ? 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 ? 粒度 ? 分割 ? 維度 ? 元數(shù)據(jù) ? 數(shù)據(jù)倉庫的數(shù)據(jù)組織形式 ? 數(shù)據(jù)倉庫的數(shù)據(jù)追加 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 12 ?粒度 ? 對(duì)數(shù)據(jù)倉庫中的 數(shù)據(jù)綜合程度高低的一個(gè)度量 。 ?粒度會(huì)深刻地影響存放在數(shù)據(jù)倉庫中的 數(shù)據(jù)量的大小以及數(shù)據(jù)倉庫所能夠回答的查詢類型 。 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 13 ? 粒度 一個(gè)顧客一個(gè)月中每次通話的細(xì)節(jié) 一個(gè)顧客一個(gè)月中通話的綜合 Cass Squire上星期給他在波士頓的女友打過電話沒有？ 能回答，盡管需要一定數(shù)量的檢索 根本不能回答，細(xì)節(jié)已經(jīng)丟失 “上個(gè)月，華盛頓人平均打出多少個(gè)電話？ ” 由此可見，粒度級(jí)別對(duì)于能回答什么問題和問答問題所需資源多少有深刻的影響。 ? 樣本數(shù)據(jù)庫的粒度：是根據(jù) 采樣率的高低 來劃分的，采樣粒度不同的樣本數(shù)據(jù)庫可以具有相同的綜合級(jí)別，它是 按一定的采樣率從細(xì)節(jié)數(shù)據(jù)庫或輕度綜合數(shù)據(jù)庫中提取的一個(gè)子集。 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 17 ② 樣本數(shù)據(jù)庫 ? 用處：代替源數(shù)據(jù)進(jìn)行模擬分析 ， 適用于趨勢分析和預(yù)測分析 ? 抽樣的方法：隨機(jī)抽取 ， 必要時(shí)可采用 “ 判斷樣本 ” ? 優(yōu)點(diǎn)： — 高效率 ， 在啟發(fā)式分析中 ， — 源數(shù)據(jù)量很大的情況下 ， 抽樣數(shù)據(jù)可以大大下降 ， — 分析結(jié)果誤差極小 — 有助于抓住主要因素和主要矛盾 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 18 ? 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 ? 粒度 ? 分區(qū) ? 維度 ? 數(shù)據(jù)倉庫的數(shù)據(jù)組織形式 ? 數(shù)據(jù)倉庫的數(shù)據(jù)追加 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 19 ? 分區(qū) ? 數(shù)據(jù)分區(qū)是指把數(shù)據(jù)分散到可獨(dú)立處理的分離物理單元中去。 ?在數(shù)據(jù)倉庫中圍繞分區(qū)的問題的焦點(diǎn)不是該不該分區(qū)而是如何去分區(qū)的問題。 ?恰當(dāng)進(jìn)行分區(qū)的好處： — 數(shù)據(jù)裝載、數(shù)據(jù)訪問、數(shù)據(jù)存檔、 — 數(shù)據(jù)刪除、數(shù)據(jù)監(jiān)控、數(shù)據(jù)存儲(chǔ)、 ?當(dāng)結(jié)構(gòu)相似的數(shù)據(jù)被分到多個(gè)數(shù)據(jù)的物理單元時(shí)，數(shù)據(jù)便被分區(qū)了。 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 20 ?分區(qū) 數(shù)據(jù)分區(qū) 小的數(shù)據(jù)單元易于： ?重構(gòu) ?索引 ?順序掃描 ?重組 ?恢復(fù) ?監(jiān)控 1989 1990 1987 1991 1988 獨(dú)立管理的數(shù)據(jù)單元可以有不同的定義 處理設(shè)備 A 處理設(shè)備 B 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 21 ? 分區(qū) ? 有多種數(shù)據(jù)分區(qū)的標(biāo)準(zhǔn)： — 時(shí)間 — 業(yè)務(wù)范圍 — 地理位置 — 組織單位 — 所有上述標(biāo)準(zhǔn) ?數(shù)據(jù)分區(qū)的標(biāo)準(zhǔn)是完全由開發(fā)人員來決定的。 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 22 ? 分區(qū) ? 人壽保險(xiǎn)公司選擇時(shí)間和保險(xiǎn)種類，將數(shù)據(jù)分區(qū)為以下物理單元： —2023年健康索賠 —2023年健康索賠 —2023年健康索賠 —1999年人壽保險(xiǎn)索賠 —2023年人壽保險(xiǎn)索賠 —2023年人壽保險(xiǎn)索賠 —2023年人壽保險(xiǎn)索賠 —2023年意外傷亡索賠 —2023年意外傷亡索賠 —2023年意外傷亡索賠 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 23 ? 分區(qū) ? 數(shù)據(jù)分區(qū)優(yōu)點(diǎn)： ? 提高系統(tǒng)性能 –“ 1996年家電類商品銷售的季節(jié)分布如何？” –“每年的第一季度商品銷售在各類商品上的分布情況是怎樣的？” ? 提高靈活性 修改數(shù)據(jù)定義容易 不同年份的險(xiǎn)種的定義描述是相互獨(dú)立 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 24 ? 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 ? 粒度 ? 分區(qū) ? 維度 ? 數(shù)據(jù)倉庫的數(shù)據(jù)組織形式 ? 數(shù)據(jù)倉庫的數(shù)據(jù)追加 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 25 ? 維度 ?管理人員可以從客戶的角度、產(chǎn)品的角度或者從供應(yīng)商、地點(diǎn)、渠道、發(fā)生的時(shí)間等角度來分析決策問題。 ?數(shù)據(jù)倉庫中的數(shù)據(jù)就按照這些維來組織，維也就成了數(shù)據(jù)倉庫中識(shí)別數(shù)據(jù)的索引。 數(shù)據(jù)
環(huán)評(píng)公示相關(guān)推薦
鄂ICP備17016276號(hào)-1