數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘簡(jiǎn)介-文庫(kù)吧在線文庫(kù)
【正文】 數(shù)據(jù)中提取有價(jià)值知識(shí)的工具 ；若在當(dāng)前運(yùn)行的操作數(shù)據(jù)庫(kù)中獲取信息，則影響數(shù)據(jù)庫(kù)的使用和性能 海量數(shù)據(jù)要求強(qiáng)有力的數(shù)據(jù)分析工具 ? 以前的專家系統(tǒng) 依賴用戶或某領(lǐng)域的專家人工地將知識(shí)輸入知識(shí)庫(kù) ；這一過(guò)程常常有偏差和錯(cuò)誤 ，并且 耗時(shí) 、 費(fèi)用高； ? 使用數(shù)據(jù)挖掘工具進(jìn)行數(shù)據(jù)分析；可以 發(fā)現(xiàn)重要的數(shù)據(jù)模式 ，對(duì)商務(wù)決策、知識(shí)庫(kù)、科學(xué)和醫(yī)學(xué)研究作出了巨大貢獻(xiàn)； ? 數(shù)據(jù)和信息之間的差距，要求系統(tǒng)地開發(fā)數(shù)據(jù)挖掘工具， 將沉寂的數(shù)據(jù)轉(zhuǎn)換成寶貴的知識(shí) 。 面向主題 ，是指數(shù)據(jù)倉(cāng)庫(kù)內(nèi)的信息是按主題進(jìn)行組織的，為按決策的過(guò)程提供信息。 保證各數(shù)據(jù)源中 數(shù)據(jù) 的 一致性 。 DW概念總結(jié) DW概念總結(jié)： ? 數(shù)據(jù)倉(cāng)庫(kù)是一種語(yǔ)義上一致的數(shù)據(jù)存儲(chǔ)體系結(jié)構(gòu)； ? DW是決策支持?jǐn)?shù)據(jù)模型的物理實(shí)現(xiàn)，并存放企業(yè)戰(zhàn)略決策所需信息； ? DW通過(guò)將異種數(shù)據(jù)源中的數(shù)據(jù)集成在一起構(gòu)造而成； ? 完成各種數(shù)據(jù)查詢、信息分析報(bào)告和決策支持。 數(shù)據(jù)立方體由維和事實(shí)來(lái)定義； 以多維的形式對(duì)數(shù)據(jù)建模和觀察 。 數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)模型 ? 4. 多維數(shù)組 一個(gè)多維數(shù)組可以表示為（維 1，維 2，維 3， …維 n, 變量 ）； 例如：（地區(qū)、時(shí)間、銷售渠道、銷售額） ? 5. 數(shù)據(jù)單元 多維數(shù)組的取值是 數(shù)據(jù)單元。 ? OLAP系統(tǒng)采用星型或雪花模型和面向主題的數(shù)據(jù)庫(kù)設(shè)計(jì) ? 視圖 ： ? OLTP系統(tǒng)主要關(guān)注一個(gè)企業(yè)或部門內(nèi)部的當(dāng)前數(shù)據(jù)，而不涉及歷史數(shù)據(jù)或不同組織的數(shù)據(jù)。 OLTP系統(tǒng)和 OLAP系統(tǒng)的比較表 特 性 OLTP OLAP ? 特征 操作處理 信息處理 ? 面向 事務(wù) 分析 ? 用戶 辦事員、客戶、數(shù)據(jù)庫(kù)專業(yè)人員 經(jīng)理、主管、分析員 ? 功能 日常操作 長(zhǎng)期信息需求，決策支持 ? DB設(shè)計(jì) 基于 ER，面向應(yīng)用 星型 /雪花，面向主題 ? 數(shù)據(jù) 當(dāng)前的，確保最新 歷史的，跨時(shí)間維護(hù) ? 匯總 原始的，高度詳細(xì) 匯總的，統(tǒng)一的 ? 視圖 詳細(xì)，一般關(guān)系 匯總的，多維的 ? 工作單位 短的，簡(jiǎn)單事務(wù) 復(fù)雜查詢 ? 存取 讀 /寫 大多為讀 ? 關(guān)注 數(shù)據(jù)輸入、存儲(chǔ) 信息輸出 ? 操作 主關(guān)鍵字上索引 /散列 大量掃描 ? 訪問(wèn)記錄數(shù)量 數(shù)十個(gè) 數(shù)百萬(wàn) ? 用戶數(shù) 數(shù)千 數(shù)百 ? DB規(guī)模 100MB到 GB 100GB到 TB ? 優(yōu)先 高性能，高可用性 高靈活性，端點(diǎn)用戶自治 ? 度量 事務(wù)吞吐量 查詢吞吐量，響應(yīng)時(shí)間 分離的 ? 操作型 數(shù)據(jù)庫(kù)存放了大量數(shù)據(jù)，為什么不直接在這種數(shù)據(jù)庫(kù)上進(jìn)行聯(lián)機(jī)分析處理，而是另外花費(fèi)時(shí)間和資源去構(gòu)造一個(gè)與之分離的數(shù)據(jù)倉(cāng)庫(kù)？ ? 主要原因 是提高兩個(gè)系統(tǒng)的性能。 ? 操作型數(shù)據(jù)庫(kù) 只維護(hù)詳細(xì)的原始數(shù)據(jù) (如事務(wù) )，這些數(shù)據(jù)在進(jìn)行分析之前需要統(tǒng)一。這些維使得商店能夠記錄商品的月銷售，銷售商品的分店和地點(diǎn)。 ? item(商品類 ) ______________________________________ ? 季度 家庭娛樂(lè) 計(jì)算機(jī) 電 話 安全設(shè)備 ? Q1 605 825 14 400 ? Q2 680 952 31 512 ? Q3 812 1023 30 501 ? Q4 927 1038 38 580 多維數(shù)據(jù)模型 ? 以 三維角度 觀察該連鎖商店的銷售數(shù)據(jù)。這種模型有 星型模式 、 雪花模式 等。 多維數(shù)據(jù)模型 sales 數(shù)據(jù)倉(cāng)庫(kù)的星型模式 time sales item 維表 事實(shí)表 維表 time_key time_key item_name day item_key item_key day_of_the_week units_sold brand month dollars_sold typ
職業(yè)教育相關(guān)推薦
鄂ICP備17016276號(hào)-1