【文章內(nèi)容簡介】 個(gè)開放的、可更改的結(jié)構(gòu)上，以便能夠處理數(shù)據(jù)和需求的不斷膨脹。 Warehouse Manager 正是這樣的一個(gè)工具。提供一個(gè)開放的，從數(shù)據(jù)源到數(shù)據(jù)倉庫的一致的解決方案。 在 XXX 公司 的 BI 系統(tǒng)中，通過 Warehouse Manager 管理器可以方便地建立數(shù)據(jù)加工的流程 (process)和步驟 (step)，這些步驟反映了 XXX 公司 具體業(yè)務(wù) 數(shù)據(jù)的流程、規(guī)則。在各步驟中可以定義代理 (agent)來自動(dòng)運(yùn)行數(shù)據(jù)傳遞、清洗和匯總功能，這些步驟可以按時(shí)間、事件運(yùn)行，或由其它步驟觸發(fā)。代理可以運(yùn)行在 Warehouse Manager 服務(wù)器上，也可以運(yùn)行在遠(yuǎn)程的業(yè)務(wù)主機(jī)上，并且可以有多個(gè)代理運(yùn)行以提高效率?？梢砸苑浅Ｖ庇^的圖形化方式管理數(shù)據(jù)倉庫，當(dāng)報(bào)表系統(tǒng)的業(yè)務(wù)需求發(fā)生變化時(shí)，可以非常方便地修改步驟，滿足變化多端的商業(yè)競爭環(huán)境。 Warehouse Manager 是專門為商業(yè)應(yīng)用設(shè)計(jì)的，它可以自動(dòng)在網(wǎng)絡(luò)上進(jìn)行數(shù)據(jù)的傳送，不需要人為干預(yù)，并且利用它的日志功 能可以對(duì)系統(tǒng)運(yùn)行很好地監(jiān)控。 在 DB2 Warehouse Manager(DWM)中含有 Warehouse Agent 部件，它可以用來在位于數(shù)據(jù)倉庫的目標(biāo)數(shù)據(jù)庫 DB2 UDB 中執(zhí)行直接執(zhí)行數(shù)據(jù)倉庫的數(shù)據(jù)加工。另外，在數(shù)據(jù)倉庫服務(wù)器于業(yè)務(wù)系統(tǒng)之間的文件數(shù)據(jù) FTP 傳輸以及從表中抽取少量數(shù)據(jù)也可以通過 Agent 直接執(zhí)行。 建立數(shù)據(jù)倉庫之后，選擇一些有意義的主題，抽取相關(guān)的數(shù)據(jù)到 DB2 OLAP Server 中，利用 DB2 OLAP Server 的強(qiáng)大分析功能，給最終用戶提供在線多維分析的功能，能夠讓最終用戶充分 挖掘出數(shù)據(jù)中包含的信息。 DWM 在執(zhí)行完數(shù)據(jù)的提取任務(wù)后，自動(dòng)觸發(fā)預(yù)先定義好的 OLAP 操作，將數(shù)據(jù)經(jīng)過匯總計(jì)算后加載至 DB2 OLAP Server 中。 最終用戶工具我們選用 DB2 OLAP Analyzer，這個(gè)產(chǎn)品是一個(gè)數(shù)據(jù)倉庫的前端分析工具，利用這個(gè)工具用戶可以很容易地訪問 OLAP Server 中經(jīng)過處理的數(shù)據(jù)，制作各種形式、風(fēng)格的報(bào)表，報(bào)表內(nèi)容可以包括數(shù)字、圖像、曲線等，使得管理層可以直接、直觀地查看企業(yè)的經(jīng)營情況。 IBM 公司數(shù)據(jù)倉庫 /商業(yè)智能解決方案 XXX 公司 /IBM 中國有限公司機(jī)密 第 9頁 建議架構(gòu) 生產(chǎn)系統(tǒng)1生產(chǎn)系統(tǒng)2生產(chǎn)系統(tǒng)3 Intra/InterBrowserWindows 2020Meta Data管理/數(shù)據(jù)倉庫控制DB2/Warehouse Control CenterDB2 Warehouse ServerDB2 OLAP Server Application ManagerDB2 Intelligent Miner ClientWindows 2020查詢／分析WEB應(yīng)用服務(wù)器DB2 OLAP Analysis ServerHTTP ServerDB2 UDB EEDB2 Warehouse ManagerDB2 Intelligent Miner for DataDB2 Intelligent Miner ScoringOLAP DataWarehouseDataRS/6000DB2 OLAP Server 圖 3 XXX公司 BI系統(tǒng)軟硬件配置示意圖 在此方案中，采用 RS/6000 服務(wù)器作為運(yùn)行數(shù)據(jù)倉庫目標(biāo)數(shù)據(jù)庫的服務(wù)器，其上安裝 DB2 UDB EE、 DB2 Warehouse Manager，用來從生產(chǎn)系統(tǒng)抽取對(duì)決策有用的業(yè)務(wù)數(shù)據(jù)，經(jīng)過加工后存放在數(shù)據(jù)倉庫中。 在海量數(shù)據(jù)倉庫基礎(chǔ)上針對(duì)每一類具體業(yè)務(wù)問題建立數(shù)據(jù)集市。由于 XXX公司 BI 系統(tǒng)中的業(yè)務(wù)問題大多是多維分析問題，故利用另外一臺(tái) RS/6000 服務(wù)器運(yùn)行 IBM 公司專門的多維分析服務(wù)器產(chǎn)品 DB2 OLAP Server，以極大地加 快多維分析的速度。 IBM 公司數(shù)據(jù)倉庫 /商業(yè)智能解決方案 XXX 公司 /IBM 中國有限公司機(jī)密 第 10頁 在數(shù)據(jù)倉庫服務(wù)器上同時(shí)安裝 DB2 Intelligent Miner for Data，從數(shù)據(jù)倉庫服務(wù)器中抽取數(shù)據(jù)進(jìn)行智能挖掘；此外，在數(shù)據(jù)倉庫上安裝 DB2 Intelligent Miner Scoring，用來將數(shù)據(jù)挖掘的結(jié)果作用到數(shù)據(jù)倉庫中，實(shí)現(xiàn)打分功能。 所有客戶端以瀏覽器方式，通過查詢和多維分析的 WEB 應(yīng)用服務(wù)器訪問數(shù)據(jù)倉庫和多維分析服務(wù)器中的數(shù)據(jù)。整個(gè)系統(tǒng)需要在一臺(tái)運(yùn)行 Windows 2020 的PC 服務(wù)器上安裝 DB2 OLAP Analyzer Analysis Server 以及 HTTP Server，作為為前端瀏覽器客戶提供統(tǒng)一入口的應(yīng)用服務(wù)器。為提高系統(tǒng)響應(yīng)時(shí)間及提供負(fù)載均衡能力，可以配合 WebSphere Application Server 共同使用。 另外，需要配置一臺(tái) PC 服務(wù)器運(yùn)行 Windows 2020 作為整個(gè)系統(tǒng)的控制服務(wù)器，安裝 DB2 Warehouse Control Server、 DB2 Control Center、 OLAP Server 控制臺(tái) OLAP Server Application Manager 以及挖掘服務(wù)器前端 DB2 Intelligent Miner for Data Client。 此方案的優(yōu)點(diǎn)： 基于公司的業(yè)務(wù)需求。各業(yè)務(wù)部門可以根據(jù)自己的需要定義數(shù)據(jù)集市的內(nèi)容，并進(jìn)行各種指標(biāo)的多維分析，在實(shí)際應(yīng)用中不斷擴(kuò)展系統(tǒng)，為決策者提供必要的信息。 高性能、高效率。數(shù)據(jù)都在本地運(yùn)行，數(shù)據(jù)量相對(duì)較小，因此對(duì)服務(wù)器計(jì)算能力的要求相對(duì)較低。同時(shí)由于在局域網(wǎng)上運(yùn)行，對(duì)網(wǎng)絡(luò)帶寬基本不會(huì)有壓力，并且用戶響應(yīng)時(shí)間可以得到保障。 最大限度地減少網(wǎng)絡(luò)負(fù)荷。各客戶端通過瀏覽器方式從中心數(shù)據(jù)倉庫中獲取數(shù)據(jù)，只有需要的數(shù)據(jù)被傳輸。 滿足 XXX 公司 未來發(fā)展的需要。此方案具有 很好的可擴(kuò)展性，隨著 XXX公司 業(yè)務(wù)量的增加，業(yè)務(wù)數(shù)據(jù)的增多，各種業(yè)務(wù)系統(tǒng)的建立，此方案可以容易的適應(yīng)這些變化，滿足業(yè)務(wù)的需求。 一次性投資，長期受益。此方案不僅可以滿足 XXX 公司 目前 BI 系統(tǒng)的需要，更為重要的是為 XXX 公司 商業(yè)智能應(yīng)用打下了一個(gè)堅(jiān)實(shí)的基礎(chǔ)。 XXX 公司 可以在此基礎(chǔ)上開發(fā)各種商業(yè)智能應(yīng)用，輔助決策者制定業(yè)務(wù)計(jì)劃和措施，在激烈的競爭中保持良好的勢(shì)頭。 IBM 公司數(shù)據(jù)倉庫 /商業(yè)智能解決方案 XXX 公司 /IBM 中國有限公司機(jī)密 第 11頁 第四章 所選 IBM 產(chǎn)品簡介 在這次的商業(yè)智能解決方案中，采用的產(chǎn)品包括數(shù)據(jù)庫 DB2 UDB、數(shù)據(jù)倉庫(DB2 Warehouse Manager)、多維數(shù)據(jù)庫 (OLAP Server)、前臺(tái)分析工具 (DB2 OLAP Analyzer)及智能數(shù)據(jù)挖掘服務(wù)器 (DB2 Intelligent Miner for Data)。以下是各個(gè)產(chǎn)品的描述說明。 DB2 UDB 概述： DB2 家族 (Family)與 DB2 通用數(shù)據(jù)庫 (UDB) IBM DB2 家族的各種關(guān)系數(shù)據(jù)庫管理系統(tǒng)適用于各種硬件平臺(tái)，其中包括基于 Intel 的微機(jī)、 IBM 的或非 IBM 的各種 RISC 服務(wù)器和工作站、大型并行處理機(jī)、 AS/400 中型計(jì)算機(jī)系統(tǒng)以及運(yùn)行 VM、 VSE 和 MVS、 OS/390 操作系統(tǒng)的主機(jī)系統(tǒng)。各種平臺(tái)上的 DB2 有共同的應(yīng)用程序接口，因此運(yùn)行在一種平臺(tái)上的程序可以很容易地移植到其他的平臺(tái)。 DB2 家族產(chǎn)品能夠滿足不同用戶的需求，它包含了從單用戶的微機(jī)系統(tǒng)到支持 80 萬用戶的主機(jī)系統(tǒng)。 DB2 家族除了包含在各種平臺(tái)上運(yùn)行的數(shù)據(jù)庫管理系統(tǒng)內(nèi)核之外，產(chǎn)品包中還包括了數(shù)據(jù)復(fù)制、數(shù)據(jù)庫系統(tǒng)管理、環(huán)球網(wǎng) (Inter)網(wǎng)關(guān)支持、在線分析處理、多媒體支持和各種并行處理能力， 免費(fèi)提供 DB2 UDB 在 PC 和 UNIX 平臺(tái)上的客戶機(jī)端產(chǎn)品 (DB2 CAE)，并為所有平臺(tái)上的異構(gòu)數(shù)據(jù)庫訪問 提供 “中介件 ”(Middleware)解決方案。 可運(yùn)行在基于 Intel 的微機(jī)及各種 RISC 服務(wù)器 (UNIX 平臺(tái) )上的 DB2 UDB 包括： DB2 for AIX， DB2 for HPUX， DB2 for SUN Solaris， DB2 for OS/2，DB2 for Windows NT， DB2 for Win95， DB2 for Win98， DB2 for Linux， DB2 for SCO， DB2 for Sinix， DB2 for NUMAQ 等等。 這些產(chǎn)品是全功能、具有工業(yè)強(qiáng)度的關(guān)系 數(shù)據(jù)庫管理系統(tǒng)，分別用于服務(wù)器和工作站平臺(tái)?？梢园阉鼈兣渲玫絾蝹€(gè)的系統(tǒng)上，或者配置到支持客戶機(jī)工作站的 LAN 服務(wù)器上，還可以把它們配置為環(huán)球網(wǎng) (Inter)上的數(shù)據(jù)庫服務(wù)器。如果使用服務(wù)器配置，那就允許 DOS、 Windows、 OS/ Win9 Win9 Macintosh或 UNIX 客戶機(jī)去訪問 DB2 服務(wù)器，可以使用 TCP/IP、 IPX/SPX、 NetBIOS 或APPC 等網(wǎng)絡(luò)協(xié)議；如果作為環(huán)球網(wǎng)上的數(shù)據(jù)庫服務(wù)器，則可由一臺(tái)瀏覽器 (Web Browser)作為客戶機(jī)訪問。 DB2 通用數(shù)據(jù)庫 (UDB) 產(chǎn)品建立在一個(gè)共同代碼的基礎(chǔ)之上，依據(jù)多進(jìn)程 /多線索結(jié)構(gòu)進(jìn)行設(shè)計(jì)，其數(shù)據(jù)庫引擎的核心技術(shù)來自 Starburst 研究項(xiàng)目以及DB2 for OS/390 等主機(jī)產(chǎn)品，而且它們?cè)跀?shù)據(jù)和應(yīng)用的可移植性兩個(gè)方面與 DB2IBM 公司數(shù)據(jù)倉庫 /商業(yè)智能解決方案 XXX 公司 /IBM 中國有限公司機(jī)密 第 12頁 家族中的其他成員完全兼容。因而任何受過一種平臺(tái)上的 DB2 培訓(xùn)的人員能夠很容易地使用其他平臺(tái)的 DB2 產(chǎn)品。在保持這種外在的兼容性以及具備 DB2 家族成員所必需具備的可靠性和可管理性的同時(shí)，實(shí)際上它們每個(gè)產(chǎn)品還針對(duì)各自的平臺(tái)環(huán)境作了調(diào)整和優(yōu)化以達(dá)到業(yè)界領(lǐng)先的性能 /價(jià)格比。 DB2 產(chǎn)品家族提供了完整的 中文支持，對(duì)中文的支持貫穿于從微機(jī)到主機(jī)的所有平臺(tái)，這是任何其他數(shù)據(jù)庫廠家做不到的。 圖 4 DB2家族產(chǎn)品 DB2 通用數(shù)據(jù)庫 (UDB) 的特色 DB2 通用數(shù)據(jù)庫 (UDB) 無論在網(wǎng)絡(luò)計(jì)算方面還是在線分析、多媒體處理，都能給你全面、滿意的支持，而且集成了豐富的數(shù)據(jù)庫管理工具，把原來復(fù)雜的管理工作變得非常簡單。 DB2 致力于商業(yè)智能和數(shù)據(jù)倉庫方面的改進(jìn)，包括自動(dòng)觸發(fā)器，多分區(qū)和多表的自動(dòng)總計(jì)表格，優(yōu)化星式結(jié)構(gòu)的連接方法，使查詢和整個(gè)系統(tǒng)的 反應(yīng)速度大大提高。同時(shí)也增加了在裝載和在線重組時(shí)對(duì)索引的維護(hù)。在 DB2 中還新增了統(tǒng)計(jì)、線性回歸等功能，直接支持進(jìn)一步深入分析，以便利用 DB2 的查詢處理實(shí)用程序，而以往只能在應(yīng)用程序級(jí)上做到這一點(diǎn)。另外，在支持 16 和 32KB Pages、多個(gè)緩沖池 (multiple buffer pool)的優(yōu)化、更快的完整性約束處理、處理更多查詢的星式連接等方面，做了一系列的改進(jìn)。 IBM 公司數(shù)據(jù)倉庫 /商業(yè)智能解決方案 XXX 公司 /IBM 中國有限公司機(jī)密 第 13頁 應(yīng)一些 IBM 合作伙伴軟件提供商的要求， DB2 UDB 包含以下擴(kuò)充性能： ? 表 /視圖 /別名的命名長度限制由原來的 18 個(gè)字符擴(kuò)充為 128 個(gè) 字符。 ? 列命名長度限制由原來的 18 個(gè)字符擴(kuò)充為 30 個(gè)字符。 ? SQL 語句的最大長度由原來的 32KB 增大到 64KB。 ? 頁大小從 16KB 增大到 32KB。 ? 最大變量字符為 32KB，取決于頁大小。 ? 最大表 /表空間的大小從 128GB 擴(kuò)大到 512GB，取決于頁大小。 ? 索引關(guān)鍵字長度從 255 字符擴(kuò)大到 1,024 個(gè)字符。 ? 嵌入式 SQL 編程支持宏。 DB2 對(duì)統(tǒng)一代碼 (Unicode)的支持： 16Bit 固定長度的 Unicode 包含所有通用文本字符，容許定長字符序列 (以便分析 )和設(shè)定含義的字符。對(duì) UCS2 和UTF8 格式的支持，允許用戶用各種主要語言創(chuàng)建數(shù)據(jù)庫和存取數(shù)據(jù)。 DB2 支持wchar_t 數(shù)據(jù)類型，使得用戶在單字節(jié)環(huán)境 (如英語環(huán)境 )下開發(fā)的應(yīng)用在其他環(huán)境(日語 )下也可照常運(yùn)行。 DB2 UDB 增強(qiáng)面向?qū)ο蟮?SQL 和 SQL 擴(kuò)展，集成 Windows 平臺(tái)，打包新增免費(fèi)軟件。產(chǎn)品集成改變主要包括通用數(shù)據(jù)支持，免費(fèi)新增數(shù)據(jù)倉庫中心和 DB2 OLAP starter kit。用戶可以使用 DB2 的數(shù)據(jù)連接器 (DataJoiner)，象訪問DB2 數(shù)據(jù)資源一樣，訪問 Oracle, Sybase, Informix, SQL Server 等數(shù)據(jù)庫。用戶只需熟悉 DB2 語法即可在跨平臺(tái)的復(fù)雜環(huán)境中輕松獲取非 DB2 數(shù)據(jù)。 DB2 UDB 選件中針對(duì) Oracle 的關(guān)系連接部件可以使用戶通過標(biāo)準(zhǔn) SQL 查詢同時(shí)訪問DB2 和 Oracle 的數(shù)據(jù)資源。 DB2 UDB 的用戶現(xiàn)在可以跨越 DB2 數(shù)據(jù)庫、 Oracle 數(shù)據(jù)庫或者一個(gè)OLE DB 資源進(jìn)行分布式的查詢，也就是可以通過使用 DB2 通用數(shù)據(jù)庫的 SQL句法和 API 在一個(gè)工作單元的查詢內(nèi)實(shí)現(xiàn)訪問和操作保存在異構(gòu)數(shù)據(jù)資源中的數(shù)據(jù)。 DB2 Relational