數(shù)據(jù)挖掘概念與技術chapter3-數(shù)據(jù)倉庫與olap技術-文庫吧資料
2024-10-25 19:44本頁面
【正文】 更新 vs. 只讀的 , 但是復雜的查詢 10 OLTP vs. OLAP OLTP OLAP 用戶 辦事員 , IT 從業(yè)人員 知識工人 功能 日常操作 決策支持 DB 設計 面向應用 面向主題 數(shù)據(jù) 當前的 , 最新的 , 細節(jié)的 , 展平的關系的 , 孤立的 歷史的 , 匯總的 , 多維的 , 集成的 , 加固的 用法 重復 特殊的 訪問 讀 /寫 在主鍵上索引 /散列 大量掃描 工作單位 短的 , 簡單的事務 復雜的查詢 訪問的記錄量 數(shù)以十計 數(shù)百萬 用戶數(shù) 數(shù)千 數(shù)百 數(shù)據(jù)庫大小 100MB GB 100GB TB 度量 事務吞吐量 查詢吞吐量 , 響應時間 11 為什么建立分離的數(shù)據(jù)倉庫 ? ? 為了兩個系統(tǒng)的高性能 ? DBMS— 目的是 OLTP: 存取方法 , 索引 , 并發(fā)控制 , 恢復 ? 數(shù)據(jù)倉庫 —目的是 OLAP: 復雜的 OLAP 查詢 , 多維視圖 , 統(tǒng)一 . ? 不同的功能和不同的數(shù)據(jù) : ? 缺少數(shù)據(jù) : 決策支持需要歷史數(shù)據(jù) , 通常操作數(shù)據(jù)庫并不維護這些數(shù)據(jù) ? 數(shù)據(jù)統(tǒng)一 : 決策支持需要將來自異種數(shù)據(jù)源的數(shù)據(jù)統(tǒng)一 (聚集 , 匯總 ) ? 數(shù)據(jù)質(zhì)量 : 不同的數(shù)據(jù)源通常使用不同的數(shù)據(jù)表示 , 編碼 , 和應當遵循的格式 12 第 2章 : 數(shù)據(jù)挖掘的數(shù)據(jù)倉庫與 OLAP技術 ? 什么是數(shù)據(jù)倉庫 ? ? 多維數(shù)據(jù)模型 ? 數(shù)據(jù)倉庫結構 ? 數(shù)據(jù)倉庫實現(xiàn) ? 從數(shù)據(jù)倉庫到數(shù)據(jù)挖掘 ? 數(shù)據(jù)立方體的進一步發(fā)展 13 由表和電子數(shù)據(jù)表到數(shù)據(jù)方 ? 數(shù)據(jù)倉庫基于 多維數(shù)據(jù)模型 , 多維數(shù)據(jù)模型將數(shù)據(jù)視為數(shù)據(jù)方 (data cube)形式 ? 數(shù)據(jù)方 ( 如 sales) 可以將數(shù)據(jù)建模 , 并允許由多個維進行觀察 ? 維表 , 如 item (item_name, brand, type), 或 time(day, week, month, quarter, year) ? 事實表包含度量 (如 dollars_sold) 和每個相關維表的鍵 ? 在數(shù)據(jù)倉庫的文獻中 , 一個 nD 基本立方體 稱作基本方體(base cuboid). 最頂部的 0D方體存放最高層的匯總 , 稱作頂點方體 ( apex cuboid). 方體的格形成數(shù)據(jù)方 . 14 立方體 : 方體的格 all time item location supplier time,item time,location time,supplier item,location item,supplier location,supplier time,item,location time,item,supplier time,location,supplier item,location,supplier time, item, location, supplier 0D(頂點 ) 方體 1D 方體 2D方體 3D方體 4D(基本 )方體 15 數(shù)據(jù)倉庫的概念建模 ? 數(shù)據(jù)倉庫建模 : 多維模型，涉及維和度量 ? 星型模式 : 事實表在中央 , 連接一組維表 ? 雪花模式 : 星型模式的精煉 , 其中一些維分層結構被規(guī)范化成一組較小的維表 , 形成類似于雪花的形狀，減少冗余 ? 事實星座 : 多個事實表共享維表 , 可以看作星星的集合 , 因此稱作星系模式 , 或事實星座 16 星型模式的例子 time_key day day_of_the_week month quarter year time location_key street city province_or_state country location 事實表 time_key item_key branch_key location_key units_sold dollars_sold avg_sales Measures item_key item_name brand type supplier_type item branch_key branch_name branch_type branch 17 雪花模式的例子 time_key day day_of_the_week month quarter year time location_key street city_key location Sales Fact Table time_key item_key branch_key location_key units_sold dollars_sold avg_sales Measures item_key item_name brand type supplier_key item branch_key branch_name branch_type branch supplier_key supplier_type supplier city_key city province_or_state country city 18 事實星座的例子 time_key day day_of_the_week month quarter year time location_key street city province_or_state country location Sales Fact Table time_key item_key branch_key location_key units_sold dollars_sold avg_sales Measures item_key item_name brand type supplier_type item branch_key branch_name branch_type branch Shipping Fact Table time_key item_key s
教學課件相關推薦
鄂ICP備17016276號-1