數(shù)據(jù)倉庫與數(shù)據(jù)挖掘第二章b(存儲版)
【正文】 分割 ? 維度 ? 元數(shù)據(jù) ? 數(shù)據(jù)倉庫的數(shù)據(jù)組織形式 ? 數(shù)據(jù)倉庫的數(shù)據(jù)追加 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 4 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 ?為了提高分析和決策的效率和有效性，分析型處理及其數(shù)據(jù)必須與事務(wù)型處理及其數(shù)據(jù)相分離，把分析型處理所需要的數(shù)據(jù)從事務(wù)型處理環(huán)境中提取出來，按照分析型處理的要求進(jìn)行重新組織，建立單獨(dú)的分析處理環(huán)境。 — 當(dāng)前細(xì)節(jié)級的數(shù)據(jù)一方面依據(jù)數(shù)據(jù)倉庫的既定規(guī)則，經(jīng)過處理，得到情況度綜合級和高度綜合級的數(shù)據(jù)，另一方面，隨時(shí)間的推移，逐漸老化，成為歷史細(xì)節(jié)級數(shù)據(jù)。 ?例如：一個(gè)簡單的交易處于低粒度級，而每月所有交易的匯總和處于一個(gè)高粒度級。數(shù)據(jù)分割后的數(shù)據(jù)單元稱為分片。 ?用戶的這些決策分析角度或決策分析出發(fā)點(diǎn)就是數(shù)據(jù)倉庫中的維。有了這些方面的信息，能夠記錄商品的月銷售，銷售商品的地點(diǎn)。 它描述和定位數(shù)據(jù)組件、它們的起源及它們在數(shù)據(jù)倉庫進(jìn)程中的活動(dòng)； ?元數(shù)據(jù)在數(shù)據(jù)倉庫中的作用 ?為決策支持系統(tǒng)分析員和高層決策人員服務(wù)提供便利 ?解決面向應(yīng)用的操作型環(huán)境和數(shù)據(jù)倉庫的復(fù)雜關(guān)系 ?數(shù)據(jù)倉庫中數(shù)據(jù)的管理 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 35 ?元數(shù)據(jù)的種類 ?轉(zhuǎn)換元數(shù)據(jù)：為了從事務(wù)處理型環(huán)境向數(shù)據(jù)倉庫中轉(zhuǎn)換而建立的元數(shù)據(jù)，它包含了所有源數(shù)據(jù)的信息、事務(wù)描述、數(shù)據(jù)結(jié)構(gòu)的定義、提取數(shù)據(jù)和傳送數(shù)據(jù)的算法、綜合數(shù)據(jù)和凈化數(shù)據(jù)的規(guī)則、數(shù)據(jù)訪問和傳送的記錄等。 ?數(shù)據(jù)倉庫應(yīng)用的元數(shù)據(jù) —關(guān)于系統(tǒng)安全的元數(shù)據(jù)。 J Adams Main大街 P Anderson High 大街 456號 K Appleby A大街 10號 L Azimoff 被 農(nóng)場 路 64號 面向應(yīng)用數(shù)據(jù)庫 1月份數(shù)據(jù) 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 46 ?連續(xù)結(jié)構(gòu) ?它是通過比較兩個(gè)連續(xù)的簡單直接文件的不同而生成的另一種連續(xù)文件，生成的連續(xù)文件又可以和新的簡單直接文件一起生成新的連續(xù)文件 。 面向應(yīng)用數(shù)據(jù)庫每天數(shù)據(jù)每天綜合第1 天 第2 天 第7 天第1 周 第 2 周 第4 周????第1 月 第 2 月 第 12 月第 1 年 第 2 年 第 n 年????7 天綜合1 周4 周綜合1 月12 月綜合 1 年 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 ?非常緊湊 ?一些細(xì)節(jié)丟失 ?提取越久的數(shù)據(jù)，越不詳細(xì) 45 ?簡單直接 ?數(shù)據(jù)是從操作型環(huán)境直接裝入數(shù)據(jù)倉庫中，并沒有任何積累，只不過這種文件不是在每天的基礎(chǔ)上組織的，而是以較長時(shí)間（如一個(gè)星期、一個(gè)月）為單位的。 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 37 ?元數(shù)據(jù)的分類 元數(shù)據(jù) 靜態(tài)元數(shù)據(jù) 動(dòng)態(tài)元數(shù)據(jù) 名稱 描述 格式 數(shù)據(jù)類型 關(guān)系 生成時(shí)間 來源 索引 類別 域 業(yè)務(wù)規(guī)則 入庫時(shí)間 更新周期 數(shù)據(jù)質(zhì)量 統(tǒng)計(jì)信息 狀態(tài) 處理 存儲位置 存儲大小 引用處 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 38 ?元數(shù)據(jù)的內(nèi)容 ?數(shù)據(jù)源的元數(shù)據(jù) —外部數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)的描述 —數(shù)據(jù)源中所有物理數(shù)據(jù)結(jié)構(gòu)；所有數(shù)據(jù)項(xiàng)的業(yè)務(wù)定義；每個(gè)數(shù)據(jù)項(xiàng)更新的頻率，以及由誰或哪個(gè)過程更新的說明；每個(gè)數(shù)據(jù)項(xiàng)的有效值；其它系統(tǒng)中具有相同業(yè)務(wù)含義的數(shù)據(jù)項(xiàng)的清單。事實(shí)對應(yīng) 事實(shí)表 。 ?〖 例 〗 銷售分析： 數(shù)據(jù)倉庫 sales圍繞商品銷售量這個(gè)主題。然而，在數(shù)據(jù)倉庫環(huán)境中，日期幾乎總是分區(qū)標(biāo)準(zhǔn)中的一個(gè)必然組成部分。 ? 樣本數(shù)據(jù)庫的抽取按照數(shù)據(jù)的重要程度不同進(jìn)行，利用樣本數(shù)據(jù)庫采集重要數(shù)據(jù)進(jìn)行分析既可提高分析效率，又有助于抓住主要因素和主要矛盾。 — 這里， “ 高度 ” 和 “ 輕度 ” 只是一種相對的概念沒有絕對的界限。 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 8 ?數(shù)據(jù)倉庫中的數(shù)據(jù)存在著不同的綜合級別 ?當(dāng)前細(xì)節(jié)級 — 來自數(shù)據(jù)源的數(shù)據(jù)，所反映的都是當(dāng)前的業(yè)務(wù)情況，因此在導(dǎo)入數(shù)據(jù)倉庫之后，首先做為當(dāng)前細(xì)節(jié)級數(shù)據(jù)進(jìn)行存儲。 ?數(shù)據(jù)倉庫正是構(gòu)建這種新的分析處理環(huán)境而出現(xiàn)的一種數(shù)據(jù)存儲和組織技術(shù)。 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 9 ?數(shù)據(jù)倉庫中的數(shù)據(jù)存在著不同的綜合級別 ?輕度綜合級 — 為了有效控制數(shù)據(jù)倉庫進(jìn)行決策支持時(shí)的系統(tǒng)開銷，對當(dāng)前細(xì)節(jié)級的數(shù)據(jù)，通常以一定的時(shí)間段為單位進(jìn)行綜合。 ?粒度會深刻地影響存放在數(shù)據(jù)倉庫中的 數(shù)據(jù)量的大小以及數(shù)據(jù)倉庫所能夠回答的查詢類型 。 ?在數(shù)據(jù)倉庫中圍繞分區(qū)的問題的焦點(diǎn)不是該不該分區(qū)而是如何去分區(qū)的問題。 ?數(shù)據(jù)倉庫中的數(shù)據(jù)就按照這些維來組織，維也就成了數(shù)據(jù)倉庫中識別數(shù)據(jù)的索引。 數(shù)據(jù)倉庫中的數(shù)據(jù)組織 29 Vancouver Chicago Toronto New York Time(季度) Item Q1 Q2 Q3 Q4 605 680 812 927 825 952 1023 1038 14 31 30 38 400
范文總結(jié)相關(guān)推薦
鄂ICP備17016276號-1