數(shù)據(jù)倉庫與數(shù)據(jù)挖掘簡介-文庫吧在線文庫
【正文】 數(shù)據(jù)中提取有價值知識的工具 ；若在當(dāng)前運行的操作數(shù)據(jù)庫中獲取信息，則影響數(shù)據(jù)庫的使用和性能 海量數(shù)據(jù)要求強有力的數(shù)據(jù)分析工具 ? 以前的專家系統(tǒng) 依賴用戶或某領(lǐng)域的專家人工地將知識輸入知識庫 ；這一過程常常有偏差和錯誤 ，并且 耗時 、 費用高； ? 使用數(shù)據(jù)挖掘工具進行數(shù)據(jù)分析；可以 發(fā)現(xiàn)重要的數(shù)據(jù)模式 ，對商務(wù)決策、知識庫、科學(xué)和醫(yī)學(xué)研究作出了巨大貢獻； ? 數(shù)據(jù)和信息之間的差距，要求系統(tǒng)地開發(fā)數(shù)據(jù)挖掘工具， 將沉寂的數(shù)據(jù)轉(zhuǎn)換成寶貴的知識 。 面向主題 ，是指數(shù)據(jù)倉庫內(nèi)的信息是按主題進行組織的，為按決策的過程提供信息。 保證各數(shù)據(jù)源中 數(shù)據(jù) 的 一致性 。 DW概念總結(jié) DW概念總結(jié)： ? 數(shù)據(jù)倉庫是一種語義上一致的數(shù)據(jù)存儲體系結(jié)構(gòu)； ? DW是決策支持數(shù)據(jù)模型的物理實現(xiàn)，并存放企業(yè)戰(zhàn)略決策所需信息； ? DW通過將異種數(shù)據(jù)源中的數(shù)據(jù)集成在一起構(gòu)造而成； ? 完成各種數(shù)據(jù)查詢、信息分析報告和決策支持。 數(shù)據(jù)立方體由維和事實來定義； 以多維的形式對數(shù)據(jù)建模和觀察 。 數(shù)據(jù)倉庫的數(shù)據(jù)模型 ? 4. 多維數(shù)組 一個多維數(shù)組可以表示為（維 1，維 2，維 3， …維 n, 變量 ）； 例如：（地區(qū)、時間、銷售渠道、銷售額） ? 5. 數(shù)據(jù)單元 多維數(shù)組的取值是 數(shù)據(jù)單元。 ? OLAP系統(tǒng)采用星型或雪花模型和面向主題的數(shù)據(jù)庫設(shè)計 ? 視圖 ： ? OLTP系統(tǒng)主要關(guān)注一個企業(yè)或部門內(nèi)部的當(dāng)前數(shù)據(jù)，而不涉及歷史數(shù)據(jù)或不同組織的數(shù)據(jù)。 OLTP系統(tǒng)和 OLAP系統(tǒng)的比較表 特 性 OLTP OLAP ? 特征 操作處理 信息處理 ? 面向 事務(wù) 分析 ? 用戶 辦事員、客戶、數(shù)據(jù)庫專業(yè)人員 經(jīng)理、主管、分析員 ? 功能 日常操作 長期信息需求，決策支持 ? DB設(shè)計 基于 ER，面向應(yīng)用 星型 /雪花，面向主題 ? 數(shù)據(jù) 當(dāng)前的，確保最新 歷史的，跨時間維護 ? 匯總 原始的，高度詳細 匯總的，統(tǒng)一的 ? 視圖 詳細，一般關(guān)系 匯總的，多維的 ? 工作單位 短的，簡單事務(wù) 復(fù)雜查詢 ? 存取 讀 /寫 大多為讀 ? 關(guān)注 數(shù)據(jù)輸入、存儲 信息輸出 ? 操作 主關(guān)鍵字上索引 /散列 大量掃描 ? 訪問記錄數(shù)量 數(shù)十個 數(shù)百萬 ? 用戶數(shù) 數(shù)千 數(shù)百 ? DB規(guī)模 100MB到 GB 100GB到 TB ? 優(yōu)先 高性能，高可用性 高靈活性，端點用戶自治 ? 度量 事務(wù)吞吐量 查詢吞吐量，響應(yīng)時間 分離的 ? 操作型 數(shù)據(jù)庫存放了大量數(shù)據(jù)，為什么不直接在這種數(shù)據(jù)庫上進行聯(lián)機分析處理，而是另外花費時間和資源去構(gòu)造一個與之分離的數(shù)據(jù)倉庫？ ? 主要原因 是提高兩個系統(tǒng)的性能。 ? 操作型數(shù)據(jù)庫 只維護詳細的原始數(shù)據(jù) (如事務(wù) )，這些數(shù)據(jù)在進行分析之前需要統(tǒng)一。這些維使得商店能夠記錄商品的月銷售，銷售商品的分店和地點。 ? item(商品類 ) ______________________________________ ? 季度 家庭娛樂 計算機 電 話 安全設(shè)備 ? Q1 605 825 14 400 ? Q2 680 952 31 512 ? Q3 812 1023 30 501 ? Q4 927 1038 38 580 多維數(shù)據(jù)模型 ? 以 三維角度 觀察該連鎖商店的銷售數(shù)據(jù)。這種模型有 星型模式 、 雪花模式 等。 多維數(shù)據(jù)模型 sales 數(shù)據(jù)倉庫的星型模式 time sales item 維表 事實表 維表 time_key time_key item_name day item_key item_key day_of_the_week units_sold brand month dollars_sold typ
職業(yè)教育相關(guān)推薦
鄂ICP備17016276號-1