【正文】 務系統(tǒng)的建立 聯(lián)機事務系統(tǒng)的建立（續(xù)） ?當時單位容量的聯(lián)機存儲介質比現(xiàn)在昂貴得多，相對于市場競爭的壓力，將大量的歷史業(yè)務數(shù)據(jù)長時間聯(lián)機保存去用于分析顯然是過于奢侈了。 市場需求是技術發(fā)展的源動力 ?數(shù)據(jù)倉庫的出現(xiàn)和發(fā)展 是數(shù)據(jù)庫和 OLTP技術發(fā)展、數(shù)據(jù)庫應用深化的產(chǎn)物； ?目的是把數(shù)據(jù)庫中的大量數(shù)據(jù)轉化為有用信息，為企業(yè)更好地進行決策服務 。 寶鋼追求的目標 ?寶鋼作為中國的特大型鋼鐵企業(yè)，它的主要建設目標是在激烈的國際國內(nèi)市場競爭中立于不敗之地，并且要 加強管理、優(yōu)化資源，追求效益最大化 。數(shù)據(jù)倉庫技術介紹 了解 你的組織 了解你的客戶 了解你的供應商 嵇 曉 內(nèi)容提要 ?動機與需求 ?數(shù)據(jù)倉庫技術 ?數(shù)據(jù)倉庫在寶鋼的實踐 ?結束語 面臨的問題 人們在日常生活中經(jīng)常會遇到這樣的情況： ?超市的經(jīng)營者希望將經(jīng)常被同時購買的商品放在一起 ， 以增加銷售； ?保險公司想知道購買保險的客戶一般具有哪些特征； ?醫(yī)學研究人員希望從已有的成千上萬份病歷中找出患某種疾病的病人的共同特征 ， 從而為治愈這種疾病提供一些幫助； ?…… 企業(yè)面臨的問題 ?經(jīng)過多年的計算機應用和市場積累，許多企業(yè)保存了大量原始數(shù)據(jù)和各種業(yè)務數(shù)據(jù) , 它是企業(yè)生產(chǎn)經(jīng)營活動的真實記錄 ?由于缺乏集中存儲和管理 ， 這些數(shù)據(jù)不能為本企業(yè)加以利用 , 不能進行有效的統(tǒng)計 、 分析及評估 ， 無法將這些數(shù)據(jù)轉換成企業(yè)有用的信息 數(shù)據(jù)爆炸問題 – 自動的數(shù)據(jù)收集工具和成熟的數(shù)據(jù)庫技術導致巨大的數(shù)據(jù)存儲在文件系統(tǒng)、數(shù)據(jù)庫和其它的信息庫中 。這就要求使其生產(chǎn)和經(jīng)營過程共同達到優(yōu)化，例如，能夠快速準確地提供報價、確定交貨期、以及確保產(chǎn)品質量等，并且制定有正確的企業(yè)發(fā)展戰(zhàn)略，以適應市場需求的變化，能做出及時反應。 內(nèi)容提要 ?動機與需求 ?數(shù)據(jù)倉庫技術 ?數(shù)據(jù)倉庫在寶鋼的實踐 ?結束語 在早期，業(yè)務人員考慮如何實現(xiàn)自動化 ….. 計算機發(fā)展史 在數(shù)據(jù)庫應用的早期，計算機系統(tǒng)所處理的是從無到有 的問題，是傳統(tǒng)手工業(yè)務自動化的問題。因此，聯(lián)機事務處理系統(tǒng)只涉及當前數(shù)據(jù)，系統(tǒng)積累下的歷史業(yè)務數(shù)據(jù)往往被轉儲到脫機的環(huán)境中。 決策的需要 決策需要對大量的業(yè)務數(shù)據(jù)包括歷史業(yè)務數(shù)據(jù)進行分析才能得到，而這種基于業(yè)務數(shù)據(jù)的決策分析，我們把它稱之為聯(lián)機分析處理。 獲得有用的信息并非想象的那么容易 (3) 針對這一問題，人們專門為業(yè)務的統(tǒng)計分析建立一個數(shù)據(jù)中心，它的數(shù)據(jù)可以從聯(lián)機的事務處理系統(tǒng)、異構的外部數(shù)據(jù)源、脫機的歷史業(yè)務數(shù)據(jù)中得到；它是一個聯(lián)機的系統(tǒng)，專門為分析統(tǒng)計和決策支持應用服務，通過它可滿足決策支持和聯(lián)機分析應用所要求的一切。 今天的數(shù)據(jù)庫就好比當年的層次數(shù)據(jù)庫和網(wǎng)型數(shù)據(jù)庫 ， 它們面向事務處理；今天的數(shù)據(jù)倉庫就好比是當年的關系數(shù)據(jù)庫 ， 它針對聯(lián)機分析 。 數(shù)據(jù)抽取在技術上主要涉及互連 、 復制 、 增量 、轉換 、 調度和監(jiān)控等方面 。 ?要決定采用什么產(chǎn)品和技術來建立數(shù)據(jù)倉庫的核心 ， 則需要從數(shù)據(jù)倉庫的技術特點著手分析 。 如何避免臟數(shù)據(jù)進入 如果數(shù)據(jù)質量不能被信任，則數(shù)據(jù)倉庫將失去價值，數(shù)據(jù)管理是一個循環(huán)往復的過程，包括四個基本功能： 定義 量度標準 報告 改善 量度標準 報告 定義 改善 連續(xù)的改善 循環(huán) 數(shù)據(jù)質量管理 ODS 用于集成相關應用系統(tǒng)并且為決策支持 系統(tǒng)提供數(shù)據(jù)基礎 SAP Oracle Financials PeopleSoft Baan home grown 商業(yè)系統(tǒng) 客戶開發(fā)系統(tǒng) ODS “ 遺產(chǎn)”系統(tǒng) DSS 探索數(shù)據(jù)倉庫 操作數(shù)據(jù)存儲（ ODS） 近線存儲器 活動監(jiān)控器 交叉介質 數(shù)據(jù)管理器 擴展數(shù)據(jù)到近線存儲器，可以極大地降低數(shù)據(jù)倉庫 環(huán)境的成本，并且可以將存儲能力擴展到無限大 近線存儲器 借助探索倉庫 可以極大的降低探索的成本 極大地提高探索速度 探索的能力呈指數(shù)級增長 探索倉庫 非常特別的查詢 token based technology relational 探索倉庫 什么是企業(yè)數(shù)據(jù)倉庫 ? 企業(yè)數(shù)據(jù)倉庫是一個環(huán)境 , 通過有效的信息來滿足和 促進企業(yè)的決策制定過程 。 質量改善， SPC。 改善客戶關系管理，讓客戶能獲得更多的好處。 用戶所需要的是什么 ? 寶鋼計算機系統(tǒng) 鐵水系統(tǒng) 一、二期工程 鋼區(qū) 寶鋼 TCP/IP光纖主干網(wǎng)絡 （一、二期工程地域： DEC TDM） （ 三期工程地域： IBM ATM） IBM RS6000 7013J30 x3臺 512MB UNISYS U6000/65 x2臺 512MB 檢化驗 DEC Alpha 21004/275 512MB 250轉爐煉鋼 DEC Alpha 21004/275 x2臺 384MB 1420冷軋 DEC Alpha 21004/275 x2臺 192MB 1580熱軋 DEC VAX 4600A x4臺 128MB 電爐 /圓坯連鑄 DEC Alpha 21004/200 x2臺 384MB 2030冷軋 DEC VAX 4600 x2臺 256MB 2050熱軋 DEC Alpha 4100 x2臺 1 GB 高速線材 DEC Alpha 41005/300 x2臺 512MB 1550冷軋前庫 PC Server SCO UNIX 300噸轉爐煉鋼 IBM RS6000 /J50 x2臺 1 GB 鋼管分公司 HP 9000 K370 x2臺 512MB 寶鋼整體產(chǎn)銷 管理系統(tǒng) IBM 9672R25主機 通信前置機 IBM RS6000/SP IBM SP主機 數(shù)據(jù)倉庫服務器 操作系統(tǒng) : OS/390 數(shù)據(jù)庫 : IBM DB2 角色 : 數(shù)據(jù)倉庫 的重要數(shù)據(jù)來源 IBM 9672（ 公司產(chǎn)銷系統(tǒng)） 操作系統(tǒng) : IBM AIX 數(shù)據(jù)庫 : SAS Data Set 角色 : 數(shù)據(jù)倉庫 、 數(shù)據(jù)分析處理、報表系統(tǒng)發(fā)布（ Domino Web Server） 的核心平臺 IBM SP (數(shù)據(jù)倉庫服務器） ?企業(yè)級數(shù)據(jù)倉庫 (按主題 ) – 質量 (試點，完成 ) – 生產(chǎn)與物流 – 市場與銷售 – 成本與財務 – 設備 – 能源 ?部門級數(shù)據(jù)倉庫 – 冷軋 – 熱軋 – …... 數(shù)據(jù)倉庫建設 數(shù)據(jù)倉庫應用 ?企業(yè)數(shù)據(jù)倉庫 – 按主題 (實施過程中 ) ?信息門戶 (Intra 應用） – 生產(chǎn)管理信息 – 技術質量信息 – 企業(yè)統(tǒng)計信息 – 生產(chǎn)區(qū)域信息 (冷軋 , 熱軋 ,…) – 生產(chǎn)管制信息 – ... 質量數(shù)據(jù)倉庫數(shù)據(jù)環(huán)境 ?來源于 9672上的 DB2 ?下載后的數(shù)據(jù)成為 ODD(Operational Data Definition) ?形成 22個主題數(shù)據(jù)表 ?采用星狀的數(shù)據(jù)模型 ?支持不同種類的應用 質量數(shù)據(jù)倉庫主題一覽 Color 電爐和初軋 線材 電鍍錫 電鍍鋅 普板 熱鍍鋅 彩涂 電工鋼 小方坯