【正文】 數(shù)據(jù)倉(cāng)庫的優(yōu)點(diǎn)（續(xù)） 投資回報(bào)率匯總結(jié)果 平均投資回報(bào)率 收回投資的平均時(shí)間 企業(yè) Source: IDC, The Foundations of Wisdom, 1996 321% 年 制造業(yè)的 ROI平均值高于其他行業(yè) 內(nèi)容提要 ?動(dòng)機(jī)與需求 ?數(shù)據(jù)倉(cāng)庫技術(shù) ?數(shù)據(jù)倉(cāng)庫在寶鋼的實(shí)踐 ?結(jié)束語 “ 從 10%的人花 100%的時(shí)間使用工具 到 100%的人花 10%的時(shí)間使用工具.” SoundView Financial Group Business Intelligence Report 信息用戶所面臨的變化 信息生產(chǎn)者 信息消費(fèi)者 高級(jí)用戶 IT人員 報(bào)表查閱者 活躍的分析人員 報(bào)表用戶 企業(yè)信息環(huán) ? 業(yè)務(wù)用戶 希望得到的不僅是一個(gè)含有正確信息的報(bào)表，并且需要能進(jìn)一步分析及格式化報(bào)表的基本的功能，以滿足其特定的需要。 數(shù)據(jù)的抽?。?2） ?數(shù)據(jù)倉(cāng)庫中的數(shù)據(jù)并不要求與聯(lián)機(jī)事務(wù)處理系統(tǒng)保持實(shí)時(shí)同步 ， 因此數(shù)據(jù)抽取可以定時(shí)進(jìn)行， 但多個(gè)抽取操作執(zhí)行的時(shí)間 、 相互的順序 、成敗對(duì)數(shù)據(jù)倉(cāng)庫中信息的有效性則至關(guān)重要 。 ?在計(jì)算機(jī)系統(tǒng)應(yīng)用的早期，還沒有積累大量的歷史數(shù)據(jù)可供統(tǒng)計(jì)與分析。 ?經(jīng)過多年的計(jì)算機(jī)應(yīng)用 ， 寶鋼積累了大量豐富翔實(shí)的原始生產(chǎn)實(shí)績(jī)數(shù)據(jù)和各種業(yè)務(wù)數(shù)據(jù) ， 它反映了企業(yè)生產(chǎn)經(jīng)營(yíng)過程中規(guī)律性的信息和知識(shí) ， 由于缺乏集中存儲(chǔ)和管理 ， 對(duì)如何充分有效地利用這些數(shù)據(jù)， 卻一直沒有很好的解決方法 ， 不能利用它們進(jìn)行有效的統(tǒng)計(jì) 、 分析及評(píng)估 ， 無法將這些數(shù)據(jù)轉(zhuǎn)換成企業(yè)真正有用的信息 。 聯(lián)機(jī)分析處理 “我們花了 20多年的時(shí)間將數(shù)據(jù)放入數(shù)據(jù)庫，如今是該將它們拿出來的時(shí)候了。 ?多維分析又是數(shù)據(jù)倉(cāng)庫的重要表現(xiàn)形式 ， 近幾年來由于互聯(lián)網(wǎng)的發(fā)展 ， 使得多維分析領(lǐng)域的工具和產(chǎn)品更加注重提供基于 Web前端聯(lián)機(jī)分析界面 ， 而不僅僅是在網(wǎng)上發(fā)布數(shù)據(jù)。 當(dāng)組織成熟時(shí)，它們從數(shù)據(jù)收集走向信息管理階段并且最終達(dá)到知識(shí)發(fā)現(xiàn)階段。 質(zhì)量改善， SPC。 今天的數(shù)據(jù)庫就好比當(dāng)年的層次數(shù)據(jù)庫和網(wǎng)型數(shù)據(jù)庫 ， 它們面向事務(wù)處理；今天的數(shù)據(jù)倉(cāng)庫就好比是當(dāng)年的關(guān)系數(shù)據(jù)庫 ， 它針對(duì)聯(lián)機(jī)分析 。 內(nèi)容提要 ?動(dòng)機(jī)與需求 ?數(shù)據(jù)倉(cāng)庫技術(shù) ?數(shù)據(jù)倉(cāng)庫在寶鋼的實(shí)踐 ?結(jié)束語 在早期，業(yè)務(wù)人員考慮如何實(shí)現(xiàn)自動(dòng)化 ….. 計(jì)算機(jī)發(fā)展史 在數(shù)據(jù)庫應(yīng)用的早期，計(jì)算機(jī)系統(tǒng)所處理的是從無到有 的問題，是傳統(tǒng)手工業(yè)務(wù)自動(dòng)化的問題。 市場(chǎng)需求是技術(shù)發(fā)展的源動(dòng)力 ?數(shù)據(jù)倉(cāng)庫的出現(xiàn)和發(fā)展 是數(shù)據(jù)庫和 OLTP技術(shù)發(fā)展、數(shù)據(jù)庫應(yīng)用深化的產(chǎn)物； ?目的是把數(shù)據(jù)庫中的大量數(shù)據(jù)轉(zhuǎn)化為有用信息，為企業(yè)更好地進(jìn)行決策服務(wù) 。 數(shù)據(jù)倉(cāng)庫的通俗定義 以辯證的眼光來看 ， 數(shù)據(jù)倉(cāng)庫的興起實(shí)際上是數(shù)據(jù)管理的一種回歸 ， 是螺旋式的上升 。 SAS快速數(shù)據(jù)倉(cāng)庫方法 快速數(shù)據(jù)倉(cāng)庫方法的重點(diǎn) ?必須得到企業(yè)高層領(lǐng)導(dǎo)的支持和幫助； ?不依賴于技術(shù)，而是一個(gè)業(yè)務(wù)過程； ?以業(yè)務(wù)為中心，并且由業(yè)務(wù)驅(qū)動(dòng)，業(yè)務(wù)用戶全程參與； ?按照約定好的規(guī)則實(shí)施； ?以迭代式方法實(shí)現(xiàn)，全局考慮，局部實(shí)施 (Think big, Start small)； 快速數(shù)據(jù)倉(cāng)庫方法的重點(diǎn)（續(xù)） ?采用快速應(yīng)用開發(fā)方法 (RAD)； ?允許柔性和動(dòng)態(tài)收集需求； ?首先尋求第一個(gè)快速成功的數(shù)據(jù)集市； ?借助優(yōu)良的項(xiàng)目管理方法幫助； ? 企業(yè)數(shù)據(jù)倉(cāng)庫的前景和目標(biāo) ? 數(shù)據(jù)倉(cāng)庫成功的因素 (如果可能算出 ROI) ? 業(yè)務(wù)過程和業(yè)務(wù)驅(qū)動(dòng) ? IT 的基礎(chǔ)架構(gòu) (當(dāng)前和未來 ) ? 用戶需求分析（數(shù)據(jù)需求、信息需求、報(bào)表和分析需求、探索需求以及信息供給需求） 企業(yè)關(guān)鍵的評(píng)估項(xiàng)目 ? 數(shù)據(jù)倉(cāng)庫規(guī)模和增長(zhǎng)性 ? 宏觀的企業(yè)數(shù)據(jù)倉(cāng)庫的物理和邏輯模型 ? 主題區(qū)域和實(shí)施優(yōu)先級(jí) ? 具體實(shí)施方案 ? 任務(wù)和責(zé)任 ? 首先實(shí)施的主題以及它的項(xiàng)目計(jì)劃 企業(yè)關(guān)鍵的評(píng)估項(xiàng)目（續(xù)） 設(shè)計(jì)階段 : 維數(shù)據(jù)模型 ?維 數(shù)據(jù)模型（邏輯） – 提供更詳細(xì)的數(shù)據(jù)視圖（邏輯） – 包括一個(gè)實(shí)體列表 ?多維 ?事實(shí) / 測(cè)量值 – 描述實(shí)體之間的關(guān)系 – 提供每一個(gè)實(shí)體的屬性列表 – 包括 維 數(shù)據(jù)模型的圖形表示 – 業(yè)務(wù)用戶更容易理解 – 能夠很好地匹配目標(biāo)模型 ?物理倉(cāng)庫數(shù)據(jù)模型可以利用 – 范式模型 – 匯總表 – 預(yù)先合并的視圖和表 – 星型模式 – 雪花模式 – 星型 雪花模式 – 多維數(shù)據(jù)模型 (MDDBs) – 非結(jié)構(gòu)化的數(shù)據(jù) /文檔 – 上述各種模型的混合使用 設(shè)計(jì)階段 : 物理模型 范式模型 MDDBs 星型模式 雪花模式 星型 雪花模式 匯總表 視圖 非結(jié)構(gòu)化數(shù)據(jù) ?企業(yè)數(shù)據(jù)倉(cāng)庫 – 范式化的 ER模型 – 雪花及星型 雪花模式 – 匯總表 – 預(yù)先合并的視圖 ?部門數(shù)據(jù)倉(cāng)庫 /數(shù)據(jù)集市 – 匯總表 – 預(yù)先合并的視圖和表 – 多維數(shù)據(jù)倉(cāng)庫（ MDDBs） – 星型模式 – 雪花及星型 雪花模式 設(shè)計(jì)階段 : 物理模型的適配性 不是設(shè)計(jì)用于直接用戶的查詢 設(shè)計(jì)用于特定的業(yè)務(wù)用戶查詢 為什么大多數(shù)數(shù)據(jù)倉(cāng)庫項(xiàng)目會(huì)失??？ ?缺乏領(lǐng)導(dǎo)支持（沒有領(lǐng)導(dǎo)理解和支持） ?缺乏業(yè)務(wù)用戶自始至終的項(xiàng)目參與 ?業(yè)務(wù)單位之間缺乏協(xié)調(diào)和努力 ?初始范圍過于廣泛和詳細(xì) (投入過大 , 難于調(diào)整等 ) ?數(shù)據(jù)質(zhì)量較差 (遺留的和現(xiàn)時(shí)的系統(tǒng) ) ?缺乏有效合理的實(shí)施力量 (例如：缺乏項(xiàng)目管理手段、任務(wù)和責(zé)任不明確等等） 搭建面向主題的信息架構(gòu)； 綜合統(tǒng)計(jì)報(bào)表、信息查詢； 常規(guī)數(shù)據(jù)分析（成本、財(cái)務(wù)、市場(chǎng)、銷售、? ），聯(lián)機(jī)分析處理，多維信息查詢； 決策支持系統(tǒng)、專家系統(tǒng)、 ?。 構(gòu)造優(yōu)化的企業(yè)信息環(huán)境 4 質(zhì)量 生產(chǎn) 銷售 能源 設(shè)備 業(yè)務(wù)系統(tǒng) 業(yè)務(wù)數(shù)據(jù)集市 財(cái)務(wù) 業(yè)務(wù) 技術(shù)元數(shù)據(jù) 操作環(huán)境 數(shù)據(jù)倉(cāng)庫環(huán)境 市場(chǎng) 個(gè)人數(shù)據(jù)集市 銷售 外部 非結(jié)構(gòu)化數(shù)據(jù) 操作數(shù)據(jù)存儲(chǔ) 企業(yè)數(shù)據(jù)倉(cāng)庫 內(nèi)容提要 ?動(dòng)機(jī)與需求 ?數(shù)據(jù)倉(cāng)庫技術(shù) ?數(shù)據(jù)倉(cāng)庫在寶鋼的實(shí)踐 ?結(jié)束語 結(jié)束語 ? 數(shù)據(jù)倉(cāng)庫是 CRM、 BI及其它決策支持系統(tǒng)的基礎(chǔ)； ? 建立完整的“寶鋼企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫”，構(gòu)筑完善的 OLAP應(yīng)用，開展數(shù)據(jù)挖掘工作； ? 以數(shù)據(jù)倉(cāng)庫技術(shù)為基礎(chǔ)考慮關(guān)鍵的業(yè)務(wù)應(yīng)用： 如質(zhì)量分析及控制，摸索質(zhì)量控制的規(guī)律，實(shí)現(xiàn)工藝參數(shù)的優(yōu)化； 標(biāo)準(zhǔn)成本的科學(xué)核定，按照投入產(chǎn)出原則，構(gòu)建成本中最主要的金屬料平衡模型； 財(cái)務(wù)分析，提高競(jìng)爭(zhēng)力； 生產(chǎn)過程的優(yōu)化組合 ? ? 實(shí)事求是，數(shù)據(jù)倉(cāng)庫并不是萬能的，對(duì)不同需求應(yīng)科學(xué)分析，區(qū)分對(duì)待。 數(shù)據(jù)集市 ODS 近線存儲(chǔ)器 探索 倉(cāng)庫 數(shù)據(jù)倉(cāng)庫的組成 ETL 自動(dòng)處理數(shù)據(jù) 集成和轉(zhuǎn)換 1 2 3 4 通過不干凈的遺留系統(tǒng)； 不合適的集成； 數(shù)據(jù)倉(cāng)庫的過期； 用戶需求的改變?！? 著名的數(shù)據(jù)倉(cāng)庫專家 Ralph Kimball 市場(chǎng)需求是技術(shù)發(fā)展的源動(dòng)力 早期應(yīng)用系統(tǒng) PC 電子表格 歸檔文件 OLTP系統(tǒng) 數(shù)據(jù)倉(cāng)庫 獲得信息