【正文】 如何獲得信息 第一，所有聯機事務處理強調的是數據更新處理性能和系統(tǒng)的可靠性，并不關心信息查詢的方便與快捷；聯機分析和事務處理對系統(tǒng)的要求不同，同一個數據庫在理論上難以做到兩全； 獲得有用的信息并非想象的那么容易 (1) 第二，業(yè)務數據往往被存放于分散的異構環(huán)境中，不易統(tǒng)一查詢訪問，而且還有大量的歷史數據處于脫機狀態(tài)，形同虛設； 獲得有用的信息并非想象的那么容易 (2) 第三，業(yè)務數據的模式是針對事務處理系統(tǒng)而設計的，數據的格式和描述方式并不適合非計算機專業(yè)人員進行業(yè)務上的分析和統(tǒng)計。 寶鋼追求的目標 ?寶鋼作為中國的特大型鋼鐵企業(yè)，它的主要建設目標是在激烈的國際國內市場競爭中立于不敗之地，并且要 加強管理、優(yōu)化資源，追求效益最大化 。因此，聯機事務處理系統(tǒng)只涉及當前數據，系統(tǒng)積累下的歷史業(yè)務數據往往被轉儲到脫機的環(huán)境中。 數據抽取在技術上主要涉及互連 、 復制 、 增量 、轉換 、 調度和監(jiān)控等方面 。 改善客戶關系管理，讓客戶能獲得更多的好處。 ? 高級用戶 希望能直接訪問數據，進行特別查詢、分析及報表。 存儲和管理 ?數據倉庫的真正關鍵是數據的存儲和管理 。從而，聯機事務處理成為整個 80年代直到 90年代初數據庫應用的主流。 – 我們會淹死在數據中 , 但卻為信息、知識所餓 ! 面臨的挑戰(zhàn) ?如何在堆積如山的企業(yè)交易數據中發(fā)現具有商業(yè)價值的閃光點？ ?如何使您的企業(yè)或組織在激烈的市場競爭中保持對客戶的吸引力？ ?如何預先發(fā)現和避免企業(yè)運作過程中不易察覺的商業(yè)風險？ 寶鋼整體產銷信息管理系統(tǒng) L4 L2 過程控制計算機系統(tǒng) L3 （分廠級） 生產控制計算機系統(tǒng) 寶鋼計算機系統(tǒng)的架構 L1 基礎自動化 基礎自動化 寶鋼的現狀及需求 ?寶鋼擁有許多傳統(tǒng)的 OLTP（ 聯機事務處理 ） 系統(tǒng) ，擔負著許多重要的日常事物處理工作 ， 在寶鋼的生產經營活動中扮演著重要角色 。如果說傳統(tǒng)聯機事務處理強調的是更新數據庫——向數據庫中添加信息，那么聯機分析處理就是要從數據庫中獲取信息、利用信息。 信息探索 ?信息探索實際上相當于數據倉庫的門面 ， 其性能主要集中在多維分析 、 數理統(tǒng)計和數據挖掘方面 。 對公司信息環(huán)境的影響 從數據到信息到知識 Source: Data Warehouse Network, June 1997. 業(yè)務增值 信息管理成熟期 數據 信息 知識 自動控制 創(chuàng)新 適應 成本降低 操作系統(tǒng) 收入增加 決策支持系統(tǒng) 市場領先 面向客戶的系統(tǒng) F 一些組織已經進入知識發(fā)現階段。 關系管理（客戶、供應商、訪問者、 ?) 數據挖掘、知識發(fā)現； ?... 數據倉庫相關領域的應用 及時獲取生產管理綜合信息，為決策者提供科學分析依據； 改善管理能力，可以得到憑直覺無法得到的結論； 對轉瞬即逝的機會快速作出反應，提高競爭能力； 既能夠管理宏觀信息也能夠管理微觀數據，可以追朔歷史； 數據倉庫的優(yōu)點 建立企業(yè)內部各部門之間的合作關系 。 所不同的是 ， 今天的數據倉庫不必再為聯機事務處理的特性而奔忙 ， 由于技術的專業(yè)化 ， 它可更專心于聯機分析領域的發(fā)展和探索 。例如銀行的儲蓄系統(tǒng)、 電信的計費系統(tǒng)，它們都屬于典型的聯機事務處理系統(tǒng)?！? 寶鋼股份質量方針 ?隨著市場競爭的加劇和用戶要求的提高，從大量數據中挖掘規(guī)律性知識，制定正確的生產策略和市場策略，顯得越來越重要。 數據倉庫的通俗解釋 數據倉庫是一個作為決策支持系統(tǒng)和聯機分析應用數據源的結構化數據環(huán)境。 綜合數據 分粒度的數據 歷史數據 共享的數據 決策的基礎 大的存儲量 企業(yè)數據倉庫 分粒度的數據 公司的公共數據 長期 歷史數據 決策的基礎 大的存儲量 輕度索引 允許以多種方式瀏覽數據 財務 銷售 市場 會計 匯總的數據 部門級的數據 有限的歷史數據 有限的存儲量 重度索引 有限的數據視圖 數據集市 硅 數據集市與數據倉庫有根本性的區(qū)別 財務 銷售 市場 會計 數據集市與數據倉庫 采用正確的方法論 Development Testing High Level, Strategic Specific Build, Focussed Production Evolving, Integrated 評估 需求收集 設計 構造 部署 回顧 管理及維護 評估 : 為數據倉庫項目確定企業(yè)的業(yè)務缺陷； 需求收集： 啟動項目，搜集業(yè)務需求并且定義系統(tǒng)檢驗標準； 設計： 分析和設計數據倉庫系統(tǒng)體系結構，確認檢驗測試標準； 構造： 開發(fā)、檢驗測試、移交數據倉庫及應用系統(tǒng)； 部署： 投入到生產環(huán)境中并且在企業(yè)范圍內保證知識轉移及用戶存取的便利； 回顧： 回顧項目開發(fā)過程，評估部署過程及對業(yè)務的影響。 知識就是力量 ?了解 你的組織 ?了解你的客戶 ?了解你的供應商 ?效率 ?效果 ?Thank you ! 演講完畢，謝謝觀看！ 。 如何避免臟數據進入 如果數據質量不能被信任，則數據倉庫將失去價值，數據管理是一個循環(huán)往復的過程，包括四個基本功能： 定義 量度標準 報告 改善 量度標準 報告 定義 改善 連續(xù)的改善 循環(huán) 數據質量管理 ODS 用于集成相關應用系統(tǒng)并且為決策支持 系統(tǒng)提供數據基礎 SAP Oracle Financials PeopleSoft Baan home grown 商業(yè)系統(tǒng) 客戶開發(fā)系統(tǒng) ODS “ 遺產”系統(tǒng) DSS 探索數據倉庫 操作數據存儲（ ODS） 近線存儲器 活動監(jiān)控器 交叉介質 數據管理器 擴展數據到近線存儲器，可以極大地降低數據倉庫 環(huán)境的成本，并且可以將存儲能力擴展到無限大 近線存儲器 借助探索倉庫 可以極大的降低探索的成本 極大地提高探索速度 探索的能力呈指數級增長 探索倉庫 非常特別的查詢 token based technology relational 探索倉庫 什么是企業(yè)數據倉庫 ? 企業(yè)數據倉庫是一個環(huán)境 , 通過有效的信息來滿足和 促進企業(yè)的決策制定過程 。 獲得有用的信息并非想象的那么容易 (3) 針對這一問題，人們專門為業(yè)務的統(tǒng)計分析建立一個數據中心，它的數據可以從聯機的事務處理系統(tǒng)、異構的外部數據源、脫機的歷史業(yè)務數據中得到；它是一個聯機的系統(tǒng)，專門為分析統(tǒng)計和決策支持應用服務，通過它可滿足決策支持和聯機分析應用所要求的一切。這就要求使其生產和經營過程共同達到優(yōu)化，例如，能夠快速準確地提供報價、確定交貨期、以及確保產品質量等，并且制定有正確的企業(yè)發(fā)展戰(zhàn)略，以適應市場需求的變化，能做出及時反應。 聯機事務系統(tǒng)的建立 聯機事務系統(tǒng)的建立（續(xù)） ?當時單位容量的聯機存儲介質比現在昂貴得多，相對于市場競爭的壓力，將大量的歷史業(yè)務數據長時間聯機保存去用于分析顯然是過于奢侈了。 由于數據倉庫是一個獨立的數據環(huán)境 ， 它需要通過抽取過程將數據從聯機事務處理系統(tǒng) 、